CN101355600A - 杂音去除系统、声音获取装置、声音输出装置及记录介质 - Google Patents

杂音去除系统、声音获取装置、声音输出装置及记录介质 Download PDF

Info

Publication number
CN101355600A
CN101355600A CNA2008101443336A CN200810144333A CN101355600A CN 101355600 A CN101355600 A CN 101355600A CN A2008101443336 A CNA2008101443336 A CN A2008101443336A CN 200810144333 A CN200810144333 A CN 200810144333A CN 101355600 A CN101355600 A CN 101355600A
Authority
CN
China
Prior art keywords
sound
output
tut
deriving means
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2008101443336A
Other languages
English (en)
Other versions
CN101355600B (zh
Inventor
小池敦
户上真人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LENOVO INNOVATIONS Co.,Ltd.(HONG KONG)
Original Assignee
Casio Hitachi Mobile Communications Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Hitachi Mobile Communications Co Ltd filed Critical Casio Hitachi Mobile Communications Co Ltd
Publication of CN101355600A publication Critical patent/CN101355600A/zh
Application granted granted Critical
Publication of CN101355600B publication Critical patent/CN101355600B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M9/00Arrangements for interconnection not involving centralised switching
    • H04M9/08Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
    • H04M9/082Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers

Abstract

本发明提供一种杂音去除系统、声音获取装置、声音输出装置及记录介质。声音获取装置(100)传播声音输出通知的请求,并向通信网络(NW1)内的声音输出装置(200)请求。当根据请求,通知声音输出装置(200)开始声音输出动作时,声音获取装置(100)请求输出声音数据的传送。声音输出装置(200)根据该请求,将与自身通过扬声器输出的声音对应的输出声音数据传送到声音获取装置(100)。声音获取装置(100)使用被传送的输出声音数据,从以麦克风获取的声音数据去除杂音成分。

Description

杂音去除系统、声音获取装置、声音输出装置及记录介质
技术领域
本发明涉及杂音去除系统、声音获取装置、声音输出装置、以及存储有使计算机作为声音获取装置和声音输出装置起作用的程序的记录介质。
背景技术
家庭等所使用的电子设备的网络化进展,不仅个人计算机等的信息设备、而且音响设备(例如数字音乐播放器)或图象设备(例如电视显像机或图象录像再生装置)的家庭用电气化制品等也与LAN(Local AreaNetwork)等的IP基础网络连接。
此外,在便携式电话等的移动通信终端,有搭载无线LAN功能的设备(所谓的双重终端),能够与LAN等IP网络连接。
如此,各种电子设备与IP网络连接,能够进行设备间的协同动作或用户的远程操作等。网络化的电子设备的种类有增加的倾向,除了摄像机和数字静像摄像机等的图象记录装置以外,预想电冰箱和洗衣机等一般家电产品也能够被网络化。
在此,在很多的电子设备中操作声音的动作多,因此存在与声音相关的噪音问题。例如,在一边通过电视显像机视听电视播放一边通过便携式电话进行通话的情况下,存在电视机的声音被通话对方听到的情况。或者是,在通过个人计算机进行声音识别的情况下,如果通过音响设备进行音乐的再现,则再现的声音也被输入,从而使识别精度降低。
此外,也存在由所谓的“音响回声”而引起的声音噪音。即,通过配置有扬声器和麦克风的装置,在一边从扬声器输出声音一边通过麦克风获取声音的情况下,扬声器的输出声音蔓延,被麦克风集音。通过麦克风集音的声音所包含的扬声器的输出声音称为“音响回声”,成为通过麦克风获取的声音的质量下降或颤噪效应的原因。
作为用于去除音响回声的现有技术有回声消除器,被广泛应用于电话终端等。回声消除器,作为参照信号参照扬声器的输出声音,将基于该参照信号推定的音响回声从麦克风的获取声音中去除。
在日本特开2003-124849号公报等中公开了这样的回声消除器。该回声消除器,作为参照信号将输出的输入音(扬声器输出音)引进扬声器,生成伪回声,从麦克风输入声音减除,由此去除音响回声。
该回声消除器,进一步地,预先对汽车的刮水器音等的特定杂音的声音数据进行录音,在检测出产生特定杂音时,参照预先录音完成的声音数据从获取的声音中去除特定的音。
上述现有的回声消除器,能够作为参照信号获取向自身装置具备的扬声器的输入信号。但是,在声音输出装置和声音获取装置通过通信网络连接而构成的系统等中,由于声音输出装置和声音获取装置是各自独立的装置,所以声音获取装置无法从声音输出装置获取准确的参照信号。因此,假设即使将参照信号从声音输出装置发送到声音获取装置,根据通信网络的状态,该传送特性发生很大变化,也难以准确地获取参照信号。
此外,上述的回声消除器是去除特定杂音的装置,不能如外部设备的扬声器那样与输出任意声音的情况对应。
发明内容
本发明是鉴于上述问题点而完成的,其目的在于从获取的声音中有效地去除由外部设备的输出声音产生的音响回声。
此外,本发明的目的在于,即使在不能直接获取扬声器所供给的声音信号的情况下,通过使获取的声音信号与麦克风的获取信号同步,有效地去除杂音。
为了达到上述目的,本发明的第一观点涉及的杂音去除系统,是将获取声音的至少一个声音获取装置(100),和输出声音的至少一个声音输出装置(200)通过通信网络(NW1)连接的杂音去除系统(1),上述声音获取装置(100)包括:声音数据获取单元(110、130、140),以该声音获取装置(100)的声音获取动作的开始、或者上述声音输出装置(200)的声音输出动作的开始为契机,获取上述声音输出装置(200)输出的声音的声音数据;以及,杂音去除单元(110),使用上述声音数据获取单元(110、130、140)获取的声音数据,去除上述声音输出装置(200)输出的声音。
为了达到上述目的,本发明的第二观点涉及的声音获取装置,是通过通信网络(NW1)与声音输出装置(200)连接的、获取声音并利用的声音获取装置(100),该声音获取装置(100)包括:声音数据获取单元(110、130、140),以该声音获取装置(100)的声音获取动作的开始、或者上述声音输出装置(200)的声音输出动作的开始为契机,获取上述声音输出装置(200)输出的声音的声音数据;以及,杂音去除单元(110),使用上述声音数据获取单元(110、130、140)获取的声音数据,从上述获得的声音去除上述声音输出装置(200)输出的声音。
为了达到上述目的,本发明的第三观点涉及的声音输出装置,是通过通信网络(NW1)与声音获取装置(100)连接的、使用声音数据输出声音的声音输出装置(200),该声音获取装置(200)包括:请求接收单元(210、220),接收上述声音获取装置(100)传播到上述通信网络(NW1)的、请求上述声音输出装置(200)的声音输出动作的通知的输出通知请求和请求从上述声音输出装置(200)向上述声音获取装置(100)的声音数据的传送停止的传送停止请求;以及,声音数据传送单元(210、220),在上述请求接收单元(210、220)从上述声音获取装置(100)接收到上述输出通知请求之后,到接收来自发送该输出通知请求的上述声音获取装置(100)的上述传送停止请求为止的期间,在该声音输出装置(200)进行声音输出动作的情况下,通过上述通信网络(NW1)将该声音输出装置(200)输出的声音的声音数据传送到该声音获取装置(100)。
为了达到上述目的,本发明的第四观点涉及的声音输出装置,是通过通信网络与声音获取装置(100)连接的、使用声音数据输出声音的声音输出装置(200),该声音输出装置(200)包括:输出开始通知单元(210、220),以该声音输出装置(200)开始声音输出动作为契机,将开始该声音输出动作的内容的开始通知传播到上述通信网络(NW1);以及,声音数据传送单元(210、220),通过上述通信网络(NW1)将上述声音输出装置输出的声音的声音数据传送到响应上述开始通知的上述声音获取装置(100)。
为了达到上述目的,本发明的第五观点涉及的记录介质,是计算机可读取的记录介质,其记录有程序,该程序使对通过通信网络(NW1)与声音输出装置(200)连接的、获取声音并利用的声音获取装置(100)进行控制的计算机(110)实现以下功能:以该声音获取装置(100)的声音获取动作的开始、或者上述声音输出装置(200)的声音输出动作的开始为契机,获取上述声音输出装置(200)输出的声音的声音数据的功能;以及,使用获取的声音数据,从上述获取的声音去除上述声音输出装置(200)输出的声音的功能。
为了达到上述目的,本发明的第六观点涉及的记录介质,是计算机可读取的记录介质,其记录有程序,该程序使对通过通信网络(NW1)与声音获取装置(100)连接的、使用声音数据并输出声音的声音输出装置(200)进行控制的计算机(210)实现以下功能:接收上述声音获取装置(100)传播到上述通信网络(NW1)的、请求上述声音输出装置(200)的声音输出动作的通知的输出通知请求和请求从上述声音输出装置(200)向上述声音获取装置(100)的声音数据的传送停止的传送停止请求的功能;以及,在从上述声音获取装置(100)接收上述输出通知请求之后,到接收来自发送了该输出通知请求的上述声音获取装置(100)的上述传送停止请求为止的期间,在该声音输出装置(200)进行声音输出动作的情况下,通过上述通信网络(NW1)将该声音输出装置(200)输出的声音的声音数据传送到该声音获取装置(100)的功能。
为了达到上述目的,本发明的第七观点涉及的记录介质,是计算机可读取的记录介质,其记录有程序,该程序使对通过通信网络(NW1)与声音获取装置(100)连接的、使用声音数据并输出声音的声音输出装置(200)进行控制的计算机(210)实现以下功能:以该声音输出装置(200)开始声音输出动作为契机,将开始该声音输出动作的内容的开始通知传播到上述通信网络(NW1)的功能;以及,通过上述通信网络(NW1)将上述声音输出装置(200)输出的声音的声音数据传送到响应于上述开始通知的上述声音获取装置(100)的功能。
发明效果
根据本发明,能够有效地去除由于外部装置的输出而混入的声音。
附图说明
图1是表示本发明的实施方式涉及的杂音去除系统的结构例的图。
图2是表示声音获取装置的结构例的框图。
图3是表示声音输出装置的结构例的框图。
图4是表示用于说明本发明的实施方式1涉及的动作的顺序图。
图5是用于说明在图4所示的动作中,声音获取装置执行的“获取侧处理(1)”的流程图。
图6是用于说明本发明的实施方式涉及的“杂音去除处理”的流程图。
图7是用于说明执行图6所示的“杂音去除处理”时的动作的框图。
图8用于说明在图4所示的动作中,声音输出装置执行的“输出侧处理(1A)”的流程图。
图9用于说明在图4所示的动作中,声音输出装置执行的“输出侧处理(1B)”的流程图。
图10是用于说明本发明的实施方式2涉及的动作的顺序图。
图11用于说明在图10所示的动作中,声音输出装置执行的“输出侧处理(2)”的流程图。
图12是用于说明在图10所示的动作中,声音获取装置执行的“获取侧处理(2A)”的流程图。
图13是用于说明在图10所示的动作中,声音获取装置执行的“获取侧处理(2B)”的流程图。
图14是用于说明本发明的实施方式3涉及的声音获取装置的动作的流程图。
具体实施方式
第一实施方式
下面,对本发明的实施方式1涉及的杂音去除系统进行说明。本实施方式涉及的杂音去除系统1,如图1所示,由声音获取装置100(声音获取装置100A和声音获取装置100B)、声音输出装置200(声音输出装置200A和声音输出装置200B)等构成,通过通信网络NW1相互连接。
通信网络NW1例如是IEEE802.3等的LAN(Local Area Network),构成杂音去除系统1的声音获取装置100和声音输出装置200,通过通信网络NW1,利用有线或无线能够相互通信。此外,杂音去除系统1中的声音获取装置100和各声音输出装置200的个数是任意的。
声音获取装置100,例如是便携式电话等移动通信终端或IP电话终端等电话终端、摄像机、通话记录器、具有声音识别功能的设备、等具有所谓声音获取功能的装置,具有至少能够与通信网络NW1连接的结构。
声音输出装置200,例如是音响播放器、电视显像机、能够输出警告音等的家电制品(例如电冰箱和洗衣机等)、具有声音输出功能的装置,具有至少能够与通信网络NW1连接的结构。
在本实施方式中,作为一个例子,将声音获取装置100A设为便携式电话机,将声音获取装置100B设为个人计算机(PC),将声音输出装置200A设为电视显像机(TV),将声音输出装置200B设为音响装置。
在这种情况下,构成杂音去除系统1的声音获取装置100和各声音输出装置200的各个,是家庭等中一般使用的电子设备,通过基于标准的LAN规格或DLNA(Digital Living Network Alliance)的标准等,与通信网络NW1连接,能够相互通信。
在此,通信网络NW1,通过路由器或调制解调器等的通信装置10与作为WAN(Wide Area Network)的通信网络NW2连接,与通信网络NW1连接的各装置,根据需要,能够与因特网等外部网络连接。
在这样的结构中,通信装置10,为了声音获取装置100和声音输出装置200与通信网络NW1连接而进行必要的动作。在此,通信装置10具有DHCP(Dynamic Host Configuration Protocol)或UPnP(Universal Plug andPlay)等地址付与功能,声音获取装置100和声音输出装置200的各个,通过通信装置10,被付与在通信网络NW1的通信所需要的地址(IP地址)。在这种情况下,对声音获取装置100和声音输出装置200的各个付与属于相同的网络地址的IP地址。此外,在本实施方式中,由于将通信网络NW1设为LAN,所以各装置被付与的IP地址成为私人IP地址。
此外,在声音获取装置100或声音输出装置200的任一个通过无线与通信网络NW1连接的情况下,用于进行无线通信的访问点包含在通信装置10中。在这种情况下,通信装置10,例如包括以IEEE802.11系的无线LAN规格为依据的无线通信装置。在本实施方式中,作为便携电话机的声音获取装置100A搭载无线LAN功能。因此,在声音获取装置100A与通信网络NW1连接的情况下,与作为访问点的通信装置10进行无线通信。
对构成这样的杂音去除系统1的声音获取装置100和声音输出装置200的详细结构进行说明。
首先,对声音获取装置100进行说明。如上所述地,声音获取装置100是具有获取电话终端等那样的声音的功能的装置。另外,关于为了实现本发明涉及的动作而需要的结构,声音获取装置100A和声音获取装置100B相同。
参照图2对这样的声音获取装置100的结构进行说明。图2是表示声音获取装置100的结构的框图。如图所示,声音获取装置100,由控制部110、声音获取部120、通信部130、播放接收部140、操作部150、显示部160、声音输出部170、存储部180、总线190等构成。
控制部110例如具备CPU(Central Processing Unit)等运算装置、寄存器或RAM(Random Access Memory)等存储装置,通过执行动作程序来控制整个声音获取装置100。
声音获取部120由话筒和ADC(Analogue-Digital Converter)等构成,将通过话筒获取的模拟声音信号变换成数字声音数据(以下称为“获取声音数据”)。
通信部130是成为通过通信网络NW1用于与其它装置连接的接口的通信装置。即,只要是声音获取装置100以有线与通信网络NW1连接的形态,就能够由以IEEE802.3等LAN规格为依据的NIC(Network Interface Card)等构成。此外,只要是声音获取装置100以无线与通信网络NW1连接的形态,就能够由以IEEE802.11等无线LAN规格为依据的无线LAN模块等构成。
播放接收部140是声音获取装置100具有播放接收功能时所具备的结构,例如,由用于接收数字电视播放和数字广播播放等的播放电波的天线和调谐器、译码装置等构成。
操作部150,由与声音获取装置100的种类对应的键和按钮等构成,生成与用户操作对应的输入信号,并输入到控制部110。
显示部160,例如由LCD(Liquid Crystal Display)面板等显示面板和激励电路等构成,进行与来自控制部110的显示信号对应的显示输出。
声音输出部170,由DAC(Digital-Analogue Converter)和扬声器等构成,对通信部130通过通信网络NW1获取的声音数据或播放接收部140接收的播放的声音数据进行解调并输出。
存储部180,例如由闪存器等半导体存储装置或硬盘装置等磁存储装置等构成,对声音获取装置100的动作涉及的各种数据进行存储。即,在存储部180中存储有为了进行本发明涉及的动作所需要的动作用程序或与声音获取装置100相关的信息。在此,与声音获取装置100相关的信息,是用于从其它装置识别声音获取装置100的“获取装置ID”等。
总线190,由规定的信号传送电缆等构成,相互连接上述各结构并传送数据。
以上是为了实现本发明所需要的声音获取装置100的结构。如上所述,只要是具有声音获取功能的装置,就能够将各种形态的装置设为声音获取装置100,所以根据装置的形态能够适当具备成为必要的其它的结构,省略详细的说明。
接着,对声音输出装置200进行说明。如上所述,声音输出装置200,是如电视显像机和音响装置等那样的、具有向外部输出声音的功能的装置。
对这样的声音输出装置200的结构进行说明。另外,关于为了实现本发明涉及的动作而需要的结构,声音输出装置200A和声音输出装置200B相同。
参照图3对声音输出装置200的结构进行说明。图3是表示声音输出装置200的结构的框图。如图所示,声音输出装置200,由控制部210、通信部220、播放接收部230、操作部240、声音输出部250、存储部260、总线270等构成。
控制部210,例如具备CPU等运算装置、寄存器或RAM等存储装置,通过执行动作程序来控制整个声音输出装置200。
通信部220,由与通信部130相同的NIC或无线LAN模块等构成,通过通信网络NW1与其它装置通信,进行数据的发送和接收。
播放接收部230是声音输出装置200具有播放接收功能时所具备的结构,例如,由用于接收数字电视播放和数字广播播放等的播放电波的天线和调谐器、译码装置等构成。
操作部240,由与声音输出装置200的种类对应的键和按钮等构成,生成与用户操作对应的输入信号,并输入到控制部210。
声音输出部250,具有DAC(Digital-Analogue Converter)和扬声器等,输出各种声音。例如,如果声音输出装置200是电视显像机,对播放接收部230接收的电视播放的声音数据进行译码并从扬声器播放声音(放音)。此外,在声音输出装置200是音响装置的情况下,对播放接收部230接收的无线电播放的声音数据或通信部220从因特网下载的音乐数据等进行译码并从扬声器播放声音。另外,声音输出装置200例如是冰箱或洗衣机等的家电产品的情况下,声音输出部250输出用于将动作状态通知用户的各种警报音等的声音。
存储部260,例如由闪存器等半导体存储装置或硬盘装置等磁存储装置等构成,对声音输出装置200的动作涉及的各种数据进行存储。即,在存储部260中存储有为了进行本发明涉及的动作所需要的动作用程序或与声音输出装置200相关的信息。在此,与声音输出装置200相关的信息,是用于从其它装置识别声音输出装置200的“输出装置ID”等。
总线270,由规定的信号传送电缆等构成,相互连接上述各结构并传送数据。
以上是为了实现本发明所需要的声音输出装置200的结构。如上所述,只要是具有声音输出功能的装置,就能够将各种形态的装置设为声音输出装置200,所以能够根据装置的形态适当具备成为必要的其它的结构,省略详细的说明。
对由如上所述的声音获取装置100和声音输出装置200构成的杂音去除系统1的动作进行说明。
首先,参照图4的顺序图对声音获取装置100进行声音获取动作时的各装置的动作顺序进行概略地说明。
在此,假定一边视听通过作为电视显像机的声音输出装置200A接收的电视播放,一边通过作为便携电话机的声音获取装置100A进行通话的情况。在本例子中,在声音获取开始的时刻,声音输出装置200A处于已经输出声音的状态(声音获取中(激活)),但是声音输出装置200B处于没有输出声音的状态(没有获取声音(停止))。
在此,作为便携电话机的声音获取装置100A的声音获取动作指的是在利用电话功能的通话时获取使用者的发声声音。在本例中假定的情景中,声音获取装置100A的使用者一边视听声音输出装置200A输出的电视播放一边进行通话,因此使用者的发声声音和声音输出装置200A输出的电视播放的声音被输入到声音获取装置100A。此时,对通话的对方来说,被输入的电视播放的声音成为杂音。
下面对用于去除这样的杂音的动作进行说明。如图4所示,声音获取装置100(=声音获取装置100A),当开始声音获取动作时(步骤S11),将“输出通知请求”传播到通信网络NW1内(步骤S12)。在此,通过发送给在通信网络NW1内被付与的网络地址能够使用的传播地址,传播到与通信网络NW1连接的所有的装置。在本例中,因为声音输出装置200A和声音输出装置200B与通信网络NW1连接,所以从声音获取装置100传播的“输出通知请求”,到达声音输出装置200A和声音输出装置200B的各个。
在此被传播的“输出通知请求”,是在各声音输出装置200开始声音输出时,将其内容通知声音获取装置100而请求的信息。在“输出通知请求”中包含有表示请求声音输出的通知的声音获取装置100的“获取装置ID”。该“获取装置ID”例如是被分配到声音获取装置100的IP地址。
接收到“输出通知请求”的声音输出装置200,在接收时,在输出声音的过程中,并且,如果能够向其它装置传送输出声音数据,则向该发送源(在这种情况下,声音获取装置100A)发送“输出通知”(步骤S13)。此时,声音输出装置200参照“获取装置ID”,对“输出通知请求”的发送源进行判断。在本例中,如上所述,在声音获取装置100开始声音获取的时刻声音输出装置200A进行声音输出,因此声音输出装置200A向声音获取装置100发送“输出通知”。
在此,“输出通知”是表示声音输出装置开始声音输出的信息,包含表示其通知源的“输出装置ID”。“输出装置ID”是被分配到该声音输出装置200(在这种情况下,声音输出装置200A)的IP地址。
另一方面,在没有进行声音输出的声音输出装置200B中,虽然没发送输出通知,但预先将接收到的输出通知请求记录在存储部260等中(步骤S14)。
接收到来自声音输出装置200A的“输出通知“的声音获取装置100,从“输出装置ID”判断通知源,并将“传送请求”发送到该通知源(声音输出装置200A)(步骤S15)。
该“传送请求”是请求将该声音输出装置200输出的声音的声音数据(以下称为“输出声音数据”)传送到声音获取装置100的信息,除了“获取装置ID”以外,还包含有“声音编码表”、“QoS(Quality ofService)请求信息”。
“声音编码表”表示声音获取装置100能够处理的声音编码方式或各声音编码方式的设定内容。声音获取装置100根据“声音编码表”表示的任何的声音编码方式,将从声音输出装置200传送的输出声音数据解密。此外,“声音编码表”根据需要包含与错误订正方式或加密方式相关的信息。
“QoS请求信息”,是声音输出装置200传送输出声音数据时,表示声音获取装置100请求的通信的质量(例如容许传送延迟时间、容许错误率等)的信息。
接收到“传送请求”的声音输出装置200A,对从“获取装置ID”发送信息的声音获取装置100(在这种情况下,声音获取装置100A)进行特定,并将“传送响应”发送到该发送源(步骤S16)。
该“传送响应”是除了“输出装置ID”之外,还包含有“可否传送信息”、“声音编码信息”、“QoS信息”、“杂音去除用信息”的信息。另外,接收到“传送响应”的装置(声音获取装置100)对包含在“传送响应”中的“声音编码信息”和“QoS信息”进行保持。
在此,“可否传送信息”,表示声音输出装置200的输出声音数据的传送的可否(“可能”或“不可能”)。声音输出装置200,在与从声音获取装置100接收到的“传送请求”所包含的“声音编码表”表示的声音编码方式不对应的情况或以“QoS请求信息”表示的通信质量不能发送输出声音数据的情况下,将“可否传送信息”设为“不可能”。在除此之外的情况下,将可否传送信息设为“可能”。
“声音编码信息”是与声音数据的编码相关的信息,例如表示将输出声音数据进行编码时的声音编码方式或各声音编码方式的设定信息。“QoS信息”表示在传送输出声音数据时所保证的通信的质量(例如保证传送延迟时间、保证错误率等)。
“杂音去除用信息”是声音获取装置100从“获取声音数据”去除杂音成分时使用的信息,例如表示声音输出装置200能够输出的声音数据的频率范围、声音输出装置200的设置场所等。该频率范围涉及的信息例如用于声音获取装置100决定作为杂音去除的对象的声音的频率范围。
设置场所涉及的信息,例如用于求得从声音输出装置200的声音输出部250发出的声音被输入到声音获取装置100的声音获取部120为止所需要的时间。此外,例如用于判断从位于该场所的声音输出装置200的声音信号输出所引起的回声对获取声音数据的恶化的影响的大小。
接收到传送响应的声音输出装置200A,将作为现在正在输出的声音的数字数据的输出声音数据传送到声音获取装置100(步骤S17)。在本例中,接收到的电视播放数据所包含的声音数据被传送到声音获取装置100。
在这种情况下,声音获取装置100,基于从声音输出装置200A接收到的输出声音数据(在这种情况下,电视播放的声音数据)、和被输入到声音获取装置100的声音(在这种情况下,声音输出装置200A输出的电视播放的声音),执行用于从通话所使用的声音去除杂音成分(即,从声音输出装置200A发出的声音)的“杂音去除处理”(步骤S150)。在后面对该杂音去除处理的详细情况进行阐述。
在此,在声音获取装置100的声音获取动作结束的情况下,声音获取装置100将“传送结束请求”传播到通信网络NW1(步骤S18)。
该传送结束请求是为了停止输出声音数据的传送而向各声音输出装置200指示的信息,包含“获取装置ID”。
接收到“传送结束请求”的各声音输出装置200,只要在接收时将输出声音数据传送到该信息的发送源,则该传送结束。在本例中,因为声音输出装置200A进行了输出声音数据的传送,所以在传送结束请求的接收的同时停止声音数据的传送(步骤S19)。
另一方面,在没有进行输出声音数据的传送的声音输出装置200B中,将在步骤S14记录的输出通知请求消去(步骤S20)。
根据以上的处理,在声音获取装置100正在进行声音获取动作期间,只要在相同网络上的声音输出装置200进行声音输出,则输出的声音的声音数据从该声音输出装置200传送到声音获取装置100,因此能够进行使用了被传送的声音数据的杂音去除。
在这样的杂音去除系统1的动作中,对声音获取装置100和声音输出装置200的各个进行的处理的详细情况进行说明。
首先,参照图5所示的流程图对本实施方式涉及的声音获取装置100进行的处理(“获取侧处理(1)”)进行说明。以声音获取装置100开始声音获取动作为契机开始该“获取侧处理(1)”。
如果开始处理,则利用声音获取装置100的控制部110生成“输出通知请求”,通信部130将其传播发送到通信网络NW1内(步骤S111)。
在此,将从传播输出通知请求的时刻到传播传送结束请求的时刻为止的期间设为关于该声音获取装置100的“声音获取期间”。因此,通过在步骤S111传播输出通知请求,该声音获取装置100的“声音获取期间”开始。
在这样开始的“声音获取期间”内接收到相对于“输出通知请求”的“输出通知”的情况下(步骤S112:Yes),控制部110生成“传送请求”,并将其发送到发送了“输出通知”的声音输出装置200(步骤S113)。
当从声音输出装置200接收到相对于“传送请求”的“传送响应”时(步骤S114),控制部110将该“传送响应”保存在存储部180中,并基于“可否传送信息”,判断该声音输出装置200是否能够进行输出声音数据的传送(步骤S115)。
在能够进行声音输出装置200的输出声音数据的传送的情况下(步骤S115:Yes),从该声音输出装置200传送输出声音数据,因此通信部130接收到该输出声音数据(步骤S116),并将其输入到控制部110。这样,声音获取装置100从该声音输出装置200获取显示声音输出装置200输出的声音的输出声音数据。
在从声音输出装置200传送输出声音数据的情况下,控制部110执行用于使用该输出声音数据去除杂音的“杂音去除处理”(步骤S150)。
参照图6所示的流程图对该“杂音去除处理”进行说明。在此,在执行“杂音去除处理”时,控制部110通过执行存储部180所存储的动作程序,如图7所示,作为时间同步部111、自适应滤波器112、加法部113起作用。
当开始处理时,时间同步部111参照保存的“传送响应”所包含的“声音编码信息”和“QoS信息”,求得从声音输出装置发出各输出声音数据之后,到声音获取装置100接收各输出声音数据为止所需要的各传送时间(步骤S151)。
在此被参照的“QoS信息”中包含有表示保证传送延迟时间的信息。该保证传送延迟时间表示输出声音数据的传送延迟时的延迟时间的最大值。因此,在本实施方式中,控制部110以该保证传送延迟时间作为输出声音数据的传送时间。另外,在从各输出声音数据被付与的数据组的标题信息能够特定输出声音数据的发送时刻和接收时刻的情况下,也可以从接收时刻和发送时刻的差求得传送时间。
接着,时间同步部111使获取声音数据与输出声音数据的传送时间同步(步骤S152)。在该时间同步中,例如通过使获取声音数据在存储部180缓冲并延迟传送时间份,由此成为与输出声音数据的时间同步。
在本例中,在声音输出装置200A进行声音输出时开始在声音获取装置100A的电话通话,因此声音输出装置200A输出的声音(以下称为“声音A1”)和用户的发声声音(以下称为“声音A2”)作为获取声音输入到声音获取装置100A。
由于在这样的获取声音(A1+A2)中,声音A1成为噪音,所以杂音去除处理中的去除对象为声音A1。作为该声音A1的声源的输出声音数据(以下称为“声音数据D10”),从声音输出装置200传送到声音获取装置100,因此通过从将获取声音(A1+A2)进行编码的获取声音数据(以下称为“声音数据D20”)减去声音数据D10,由此将声音A1的成分从电话通话所使用的声音数据中去除。
但是,由于声音输出装置200通过通信网络NW1传送声音输出数据时花费传送时间,所以在步骤S152中,通过使声音数据D20延迟传送时间份,进行声音数据D10和声音数据D20的时间同步。以下,将被时间同步的获取声音数据设为声音数据D21
在此的时间同步,使获取声音在声音输出装置200的声音输出中同步。在此,如图7所示,声音输出装置200的声音输出部250发出的声音A1,在空间传播并到达声音获取装置100的声音获取部120。因此,为了适当去除声音A1,需要考虑从声音输出部250输出之后到到达声音获取部120为止的传播时间。
因而,需要使声音数据D10进一步延迟空间传播的时间份。在本实施方式中,将声音数据D10输入到自适应滤波器112,并推定从声音输出装置200输出的声音(声音A1)的传送延迟(步骤S153)。
在此,将自适应滤波器112设为基于包括声音A1在空间传播路径(以下称为“传送路径EP”)传播而产生的时间延迟(空间的传送延迟特性)的影响的传送函数的适应过滤器,通过以该适应过滤器将声音数据D10卷积,能够推定由于围绕传送路径EP而引起的延迟。以下,将利用自适应滤波器112推定传播延迟的输出声音数据设为“声音数据D11”。
在这种情况下,自适应滤波器112在每次对声音数据D10进行取样时,例如,决定传送路径EP的推定脉冲响应的过滤系数(抽头系数)并保持在存储部180中。决定该过滤系数的算法为任意的。例如,如果适应过滤器是以FIR(Finite Impulse Response)过滤器构成的,则可以使用NLMS(Normalized Least Mean Square)算法。
此外,自适应滤波器112在每次决定过滤系数时,学习到适应过滤器的传送特性逐渐接近未知的传送函数(声音A1通过在传送路径EP传送而歪曲的特性)。通过变更步骤尺寸能够控制该学习的速度。
在此,也可以参照“传送响应”所包含的“杂音去除用信息”,特定声音输出装置的设置场所,也可以求得声音输出部250和声音获取部120之间的距离。在这种情况下,基于求得的距离使适应过滤器最优化,由此能够使由于空间传送而引起的延迟的推定精度进一步提高。
在自适应滤波器112被处理的声音数据D11(输出声音数据)、和在时间同步部111的时间同步所使用的声音数据D21(获取声音数据),被输入到加法部113。
加法部113,通过从作为被时间同步的获取声音数据的声音数据D21减去自适应滤波器112生成的声音数据D11,生成从获取声音去除了成为噪音的声音A1的成分的声音数据(声音数据D3)(步骤S154)。这样的声音数据D3,被利用于与在声音获取装置100的声音获取动作对应的处理(步骤S155)。在本例中,用户在声音获取装置100A(便携电话机)的通话中进行声音获取,因此,控制部110将噪音去除后的获取声音数据通过通信部130发送到通话目的地。
如此,到杂音去除处理的结束事件发生为止进行使用被传送的输出声音数据的杂音去除(步骤S156:No)。
在此,由于当声音获取装置100中的声音获取动作结束时进行杂音去除的对象消失,所以发生杂音去除处理的结束事件(步骤S156:Yes)。在这种情况下,结束本处理,并返回到“获取侧处理(1)”(图5)的流程。
在“获取侧处理(1)”(图5)中,只要是声音获取动作的结束(步骤S117:Yes),则控制部110生成“传送结束请求”,并从通信部130传播发送到通信网络NW1(步骤S118),结束处理。通过传播发送“传送结束请求”,该声音获取装置100的“声音获取期间”结束。即,在各声音输出装置200中,通过从声音获取装置100接收“传送结束请求”,能够识别该声音获取装置100的声音获取期间结束的情况。
另外,在“获取侧处理(1)”中,在“声音获取期间”中没有接收到“输出通知”的情况(步骤S112:No)或接收到的“传送响应”的“可否传送信息”为“传送不可”的情况(步骤S115:No)下,没有进行上述杂音去除处理,在声音获取动作的结束的同时传播发送“传送接收请求”(步骤S117:Yes,步骤S118),结束处理。
接着,对图4的顺序图所示的处理中的声音输出装置200的动作进行说明。首先,参照图8所示的流程图对声音获取装置100的声音获取开始时进行了声音输出的声音输出装置200A执行的处理(“输出侧处理(1A)”)进行说明。以声音获取装置100接收到传播的“输出通知请求”为契机开始该“输出侧处理(1A)”。
当开始处理时,声音输出装置200(=声音输出装置200A)的控制部210,将接收到的“输出通知请求”保存在存储部260(步骤S121A)。
由于本例的声音输出装置200A在“输出通知请求”的接收时进行声音输出(步骤S122A:Yes),所以控制部210生成“输出通知”,并将其发送到发送了“输出通知请求”的声音获取装置100(步骤S123A)。
另外,在声音输出装置200中没有进行声音输出的情况下(步骤S122A:No),结束本处理。
在步骤S123A中发送“输出通知”的情况下,相对于该“输出通知”接收从声音获取装置100发出的“传送请求”(步骤S124A)。在这种情况下,控制部210生成“传送响应”并发送到声音获取装置100(步骤S125A),并且开始现在正在输出的声音的数据(输出声音数据)的向声音获取装置100的传送(步骤S126A)。
在本例中,由于声音输出装置200A输出接收的电视播放的声音,所以控制部210将播放接收部230接收到的电视播放的声音数据传送到声音获取装置100。
该传送动作从声音获取装置100接收“传送结束请求”为止一直继续(步骤S127A:No)。
当从声音获取装置100接收“传送结束请求”时(步骤S127A:Yes),控制部210结束输出声音数据的向声音获取装置100的传送(步骤S128A),并且消去在步骤S121A中保存在存储部260中的该声音获取装置100的“输出通知请求”(步骤S129A),结束处理。
如此,由于在接收来自该声音获取装置100的“传送结束请求”为止保存从该声音获取装置100传播发送的“输出通知请求”,所以在声音输出装置200中,根据“输出通知请求”的有无,能够掌握声音获取装置100的“声音获取期间”。
即,在通信网络NW1中有多个声音获取装置100的情况下,如果在各声音输出装置200中,识别对于各自的声音获取装置100的“声音获取期间”,并在该期间内进行声音输出时,则将输出声音数据传送到对应的声音获取装置100。
接着,在图4所示的动作例中,参照图9所示的流程图对声音获取装置100传播“输出通知请求”时没有进行声音输出的声音输出装置200B进行的处理(“输出侧处理(1B)”)进行说明。该“输出侧处理(1B)”也是以该声音输出装置200(=声音输出装置200B)接收到“输出通知请求”为契机开始的。
当开始处理时,声音输出装置200(=声音输出装置200B)的控制部210,将接收到的“输出通知请求”保存在存储部260(步骤S121B)。通过保存“输出通知请求”,能够识别该声音获取装置100为“声音获取期间”。
由于本例的声音输出装置200B在“输出通知请求”的接收时没有进行声音输出(步骤S122B:No),所以在此没有进行“输出通知”的生成·发送。
另一方面,在声音输出装置200进行声音输出的情况下(步骤S122B:Yes),结束本处理。在这种情况下,成为上述的“输出侧处理(1A)”(图8)的动作。
在“输出通知请求”的接收时没有进行声音输出的声音输出装置200B中,不开始声音输出动作而从声音获取装置100接收到“传送结束请求”的情况(步骤S123B:No,步骤S124B:No,步骤S123B:Yes)下,即,在发送了“输出通知请求”的声音获取装置100(=声音获取装置100A)的“声音获取期间”内没有开始声音输出动作的情况下,删掉保存的“输出通知请求”(步骤S129B),结束处理。
另一方面,在接收来自声音获取装置100的“传送结束请求”之前该声音输出装置200(=声音输出装置200B)开始声音输出动作的情况(步骤S123B:No,步骤S124B:Yes)下,即,在发送了“输出通知请求”的声音获取装置100(=声音获取装置100A)的“声音获取期间”内开始声音输出动作的情况下,控制部210进行与上述“输出侧处理(1A)”(图8)中的步骤S123A~步骤S125A相同的动作,即,进行“输出通知”的向声音获取装置100的发送(步骤S123A)、来自声音获取装置100的“传送请求”的接收(步骤S124A)、向声音获取装置100的“传送响应”的发送(步骤S125A)(步骤S125B)。
在这种情况下,控制部210开始向声音获取装置100的“输出声音数据”的传送(步骤S126B)。由于本例的声音输出装置200B为音响装置,所以成为输出的声音的声源的音乐数据等被传送到声音获取装置100。从声音获取装置100接收“传送结束请求”为止继续该传送动作(步骤S127B:No)。
在从声音获取装置100接收了“传送结束通知”的情况下(步骤S127B:Yes),结束传送(步骤S128B),消去在步骤S121B中保存的“输出通知请求”(步骤S129B),结束处理。
如此,即使对于在声音获取装置100开始声音获取动作的时刻没有进行声音输出动作的声音输出装置200,只要在该声音获取装置100的“声音获取期间”内开始声音输出动作,则成为该声源的声音数据就被传送到声音获取装置100,因此能够在声音获取装置100进行去除该声音的处理。
如上所述,根据本实施方式,当声音获取装置100开始声音获取动作时,开始“声音获取期间”,在该期间内进行声音输出动作的声音输出装置200将输出声音数据传送到声音获取装置100,因此能够在声音获取装置100的声音获取动作时进行噪音去除。
在这种情况下,在声音获取装置100没有执行声音获取动作的情况下,声音输出装置200没有传送输出声音数据。由此,能够抑制通信网络NW1中的无用的通信业务(traffic)的发生。
在这种情况下,通过各声音输出装置200掌握并动作各个声音获取装置100的“声音获取期间”,因此即使多个声音获取装置100开始声音获取动作,或多个声音输出装置200开始声音输出动作,也能够可靠地去除噪音。
另外,在关于某声音获取装置100的“声音获取期间”内多个声音输出装置200进行声音输出的情况下,从各声音输出装置200向该声音获取装置100传送输出声音数据。在这种情况下,在声音获取装置100执行的“杂音去除处理”(图6)中时间同步部111进行的时间同步,在被传送的多个输出声音数据之中,传送时间最慢的输出声音数据中,使获取声音数据与其它的输出声音数据同步,由此即使在输出多个声音的情况下,也能够可靠地去除噪音。
第二实施方式
在上述实施方式1中,按照基于声音获取装置100的声音获取动作的“声音获取期间”,各声音输出装置200传送输出声音数据,但在声音获取装置100的数量多等的情况下,各声音输出装置200的处理负荷变大。因此,也可以基于各声音输出装置200输出声音的期间(以下,“声音输出期间”),声音获取装置100动作。
参照图10所示的顺序图对这种情况的杂音去除系统1的动作进行概略地说明。
在本实施方式中,例示假定在图1所示的杂音去除系统1的结构之中,声音获取装置100A(便携电话机)和声音获取装置100B(PC),以及任一个声音输出装置200成为有效的情况,在声音输出装置200开始声音输出动作的时刻声音获取装置100A进行声音获取动作,但声音获取装置100B没有进行声音获取动作的情况。
在这种情况下,当声音输出装置200开始声音输出时(步骤S21),传播发送通知开始声音输出动作的“输出开始通知”(步骤S22)。在该“输出开始通知”中,包含有用于特定该声音输出装置200的“输出装置ID”。
各声音获取装置100接收声音输出装置200传播的“输出开始通知”。进行声音获取动作的声音获取装置100(即,声音获取装置100A),由于声音输出装置200输出的声音在现在进行的声音获取动作中成为噪音,所以向声音输出装置200请求用于噪音去除的输出声音数据的传送(步骤S23)。
以下,与在上述实施方式1的动作相同,声音输出装置200对于来自声音获取装置100A的传送请求发送“传送响应”之后(步骤S24),将输出声音数据传送到声音获取装置100A(步骤S25)。
声音获取装置100A执行使用从声音输出装置200传送的输出声音数据的“杂音去除处理”(步骤S150)。该“杂音去除处理”进行与图6所示的处理相同的处理。
在此,在声音输出装置200的声音输出动作结束的情况下,声音输出装置200传播表示其内容的“输出结束通知”(步骤S26),并且结束输出声音数据的传送(步骤S27)。在这种情况下,无法得到杂音去除处理所使用的输出声音数据,因此在声音获取装置100A的杂音去除处理结束。
另一方面,在没有进行声音获取动作的声音获取装置100B中,将从声音输出装置200接收到的“输出开始通知”保存在存储部180中(步骤S28),通过“输出结束通知”的接收将其删除(步骤S29)。
在本实施方式中,将从声音输出装置200传播“输出开始通知”之后到传播“输出结束通知”为止的期间设为关于该声音输出装置200的“声音输出期间”。
如果各声音获取装置100在关于任一个声音输出装置200的“声音输出期间”中进行声音获取动作,则通过向该声音输出装置200请求输出声音数据的传送,由此进行噪音去除。
对这样的杂音去除系统1的动作中的各装置的处理进行说明。首先,参照图11所示的流程图对声音输出装置200进行的处理(“输出侧处理(2)”)进行说明。该“输出侧处理(2)”是以该声音输出装置200开始声音输出动作为契机而开始的。
当开始处理时,声音输出装置200的控制部210生成“输出开始通知”,并从通信部220传播到通信网络NW1(步骤S221)。
当接收到相对于“输出开始通知”的来自声音获取装置100的“传送请求”时(步骤S222:Yes),控制部210生成“传送响应”并发送到该声音获取装置100(步骤S223),同时开始向该声音获取装置100的“输出声音数据”的传送(步骤S224)。
到声音输出装置200的声音输出动作结束为止进行该传送动作(步骤S225:No)。
当声音输出装置200的声音输出动作结束时(步骤S225:Yes),控制部210结束“输出声音数据”的传送(步骤S226),同时传播“输出结束通知”(步骤S227),结束处理。
在此,从在步骤S221中传播“输出开始通知”之后,到在步骤S227中传播“输出结束通知”为止的期间,成为该声音输出装置200的“声音输出期间”,但在该期间内没有接收到“传送请求”的情况下(步骤S222:No、步骤S228:Yes),控制部210不进行输出声音数据的传送,而传播“输出结束通知”(步骤S227),结束处理。
接着,对本实施方式中的声音获取装置100的处理进行说明。首先,参照图12所示的流程图对在声音输出装置200开始声音输出动作时进行声音获取动作的声音获取装置100A所进行的处理(“获取侧处理(2A)”)加以说明。该“获取侧处理(2A)”是以声音输出装置200接收到传播的“输出开始通知”为契机而开始的。
当开始处理时,控制部110将接收到的“输出开始通知”保存在存储部180(步骤S211A)。
由于本例的声音获取装置100A在该时刻进行声音获取动作(步骤S212A:Yes),所以控制部110生成“传送请求”,并发送给“输出开始通知”所示的“输出装置ID”(步骤S213A)。
当从声音输出装置200接收相对于发送的“传送请求”的“传送响应”时(步骤S214A),控制部110基于“传送响应”的“可否传送信息”,判断是否可以进行该声音输出装置200的输出声音数据的传送(步骤S215A)。
在此,如果是不可传送(步骤S215A:No),则不能进行使用输出声音数据的杂音去除,所以结束本处理。
另一方面,如果可以传送(步骤S215A:Yes),则接收从声音输出装置200传送的输出声音数据(步骤S216A),执行使用接收的输出声音数据的杂音去除处理(步骤S150)。
在此执行的杂音去除处理与图6所示的处理相同,但声音输出装置200发送的“输出结束通知”的接收成为杂音去除处理的结束事件。
在这种情况下,根据“输出结束通知”的接收而结束“杂音去除处理”,控制部110将在步骤S211A中保存的“输出开始通知”删除(步骤S217A),结束处理。
即,在声音输出装置200开始声音输出动作的时刻进行声音获取动作的声音获取装置100,向该声音输出装置200请求输出声音数据的传送,使用被传送的输出声音数据进行杂音去除。然后,声音输出装置200的声音输出动作结束的同时,结束杂音去除涉及的动作。
接着,参照图13所示的流程图对在声音输出装置200开始声音输出动作的时刻没有进行声音获取动作的声音获取装置100(=声音获取装置100B)进行的处理(“获取侧处理(2B)”)加以说明。该“获取侧处理(2B)”也是以该声音获取装置100接收到的“输出开始通知”为契机而开始的。
当开始处理时,控制部110将接收到的“输出开始通知”保存在存储部180(步骤S211B)。
由于本例的声音获取装置100B在该时刻不进行声音获取动作(步骤S212B:No),所以在该时刻不进行“传送请求”的发送。
在此,在接收到在步骤S211B中保存的“输出开始通知”的声音输出装置200的“声音输出期间”内,如果该声音获取装置100没有开始声音获取动作(步骤S213B:No、步骤S214B:No、步骤S213B:Yes),则删除保存的“输出开始通知”(步骤S216B),结束处理。
另一方面,在该声音输出装置200的“声音输出期间”内,在该声音获取装置100开始声音获取动作的情况下(步骤S214B:Yes),控制部110进行与上述“获取侧处理(2A)”(图12)中的步骤S213A~步骤S216A相同的处理(步骤S215B)。即,进行向声音输出装置200的“传送请求”的发送(步骤S213A)、来自声音输出装置200的“传送响应”的接收(步骤S214A)、在可以传送的情况下传送的“输出声音数据”的接收(步骤S215A:Yes、步骤S216A)。
在这种情况下,执行使用被传送的输出声音数据的“杂音去除处理”(步骤S150)。该“杂音去除处理”将来自声音输出装置200的“输出结束通知”的接收作为结束事件而结束。
当根据“输出结束通知”的接收结束“杂音去除处理”时,控制部110将在步骤S211B保存的“输出开始通知”删除(步骤S216B),结束处理。
如此,即使关于在声音输出装置200开始声音输出动作的时刻没有进行声音获取动作的声音获取装置100,只要在该声音输出装置200的“声音输出期间”内开始声音获取动作,则从声音输出装置200传送成为其声源的声音数据,因此能够在声音获取装置100进行去除该声音的处理。
如上所述,根据本实施方式,当声音输出装置200开始声音输出动作时开始“声音输出期间”,向在该期间内进行声音获取动作的声音获取装置100传送输出声音数据,因此在声音获取装置100的声音获取动作时能够进行噪音去除。
在这种情况下,通过各声音获取装置100掌握并动作关于各声音输出装置200的各个的“声音输出期间”,因此即使多个声音获取装置100开始声音获取动作、或多个声音输出装置200开始声音输出动作,也能够可靠地去除噪音。
此外,各声音输出装置200根据自身的声音输出动作进行输出声音数据的传送动作,因此与根据声音获取装置100的声音获取动作进行传送的实施方式1相比,声音输出装置200的动作负荷减轻。此外,能够容易进行声音输出装置200中的安装。
第三实施方式
在上述实施方式1和实施方式2中,使用声音输出装置200传送的输出声音数据进行杂音的去除,但也可以从声音输出装置200以外获取输出声音数据并进行杂音去除。
例如,声音输出装置200,在输出电视播放或广播播放的声音的情况下、或在通过因特网等通信网络NW2输出以推送技术(push)发送的内容的声音的情况下等,如果声音获取装置100能够接收这些播放或内容,则通过直接接收它们能够得到输出声音数据。
参照图14所示的流程图对在这种情况下声音获取装置100所进行的处理(“获取侧处理(3)”)加以说明。该“获取侧处理(3)”是以从声音输出装置200接收了“输出通知”或者“输出开始通知”为契机而开始的。即,如实施方式1那样,在以声音获取装置100的声音获取动作开始为契机进行杂音去除动作情况下,以从声音输出装置200接收了“输出通知”为契机开始本处理,如实施方式2那样,在以声音输出装置200的声音输出动作开始为契机进行杂音去除动作的情况下,以从声音输出装置200接收了“输出开始通知”为契机而开始的。
此外,假定将本例中的声音获取装置100设为能够接收一段播放等电视播放的便携电话机(即,声音获取装置100A),声音输出装置200为接收并输出电视播放的电视显像机(即,声音输出装置200A)的情况。
当开始处理时,控制部110判断在接收到的“输出通知”或“输出开始通知”(接收信息)中是否含有“声源ID”(步骤S311)。
在本实施方式中,在该声音输出装置200以外的装置中也能够同样获取声音输出装置200输出的声音的声源数据的情况下,声音输出装置200在发送的“输出通知”或“输出开始通知”中包含有作为用于特定该声源的识别信息的“声源ID”。
该“声源ID”,例如是用于接收被播放的节目的频道或频率、多点通信发送的内容的IP地址(多点通信地址)、对具有再现的声音数据的节目或内容进行特定的作品特定信息等。
另外,作为用于特定输出声音数据的发生源的信息,如果没有在声音输出装置200和声音获取装置100之间的共通的信息,则将“声源ID”的内容设定为“无”。
在接收信息中设定“声源ID”的情况下(步骤S311:Yes),控制部110判断该声音获取装置100是否能够从声源ID所示的声源获取声音数据(以下称为“声源数据”)(步骤S312)。
例如,在声源ID所示的声源是播放节目的情况下,判断声音获取装置100是否能够接收到该播放。
在本例中,由于声音输出装置200为电视显像机,所以声音输出装置200给予的“声源ID”中表示电视节目或播放频道等。此外,由于本例的声音获取装置100为附带有电视接收功能的便携电话机,所以具有接收电视播放的结构。在这种情况下,该声音获取装置100的控制部110判断为能够从声源ID所示的声源(在这种情况下,为电视播放)获取声源数据(步骤S312:Yes)。
在这种情况下,控制部110起动用于获取该声源数据的结构,开始声源数据的获取(步骤S313)。例如,在如本例那样从电视播放获取声源数据的情况下,通过控制播放接收部140,开始“声源ID”所示的频道或节目的接收。
当开始来自声源的声源数据获取时,控制部110执行使用获取的声源数据的“杂音去除处理”(步骤S150)。
该“杂音去除处理”与实施方式1和实施方式2所示的处理实质上相同。但是,关于声音获取装置100从声音获取部120获取的获取声音数据与声音获取装置100的播放接收部140接收到的声源数据的时间差,也可以使用预先对每个声源或装置指定的规定值。该规定值是例如基于在各装置中不同的解密所需要的时间等而决定的。此外,关于该规定值,也可以根据声音获取装置100的用户进行变更。
在此的“杂音去除处理”根据规定的结束事件的发生而结束。然后,在“杂音去除处理”结束之后,控制部110在每当该杂音去除动作的开始时,判断是否从该声音获取装置100发送了“输出通知请求”(步骤S314)。即,如实施方式1那样,在以声音获取装置100的声音获取动作开始为契机进行杂音去除动作的情况下,从声音获取装置100传播“输出通知请求”,但如实施方式2那样,在以声音输出装置200的声音输出动作开始为契机进行杂音去除动作的情况下,不进行“输出通知请求”的发送。
在发送“输出通知请求”的情况下(步骤S314:Yes),由于在各声音输出装置200中对该声音获取装置100的“声音获取期间”结束的情况进行识别,所以控制部110传播“传送结束请求”(步骤S315),结束处理。
另一方面,在不发送“输出通知请求”的情况下(步骤S314:No),由于对输出进行了杂音去除的声音的声音输出装置200的“声音输出期间”结束的情况进行识别,所以删除保存的来自该声音输出装置200的“输出开始通知”(步骤S316),结束处理。
另外,在本处理中,在从声音输出装置200接收到的信息中不含有“声源ID”的情况下(步骤S311:No)或在该声音获取装置100中无法获取声源数据的情况下(步骤S312:No),如实施方式1和实施方式2所示那样,向声音输出装置200请求输出声音数据的传送,使用被传送的输出声音数据执行“杂音去除处理”(步骤S317、步骤S150)。
如上所述,根据实施方式3,例如从播放或因特网等、在声音获取装置100也能够获取声音输出装置200输出的声音的声音数据的情况下,能够从这些声源获取直接声音数据并进行杂音去除,因此也可以不进行从声音输出装置200向声音获取装置100的声音数据的传送。因此,能够减轻在声音输出装置200的处理负荷和通信网络NW1的带负荷等。
如上所述,通过如上述各实施方式那样应用本发明,能够有效地去除音响回声等噪音。
例如,在用户进行电视的视听中通过便携电话打电话的情况下,能够从向通话方的发送声音中去除电视输出声音。此外,用户在通过音响播放器的音乐鉴赏中、在将声音输入到声音识别装置的情况下,能够从输入声音中去除音响播放器的输出声音,能够提高声音识别率。
另外,在上述实施方式中例示的声音获取部120将模拟声音信号变换成数字声音数据。因此,与在模拟声音信号的状态下进行过滤处理相比,能够以多种方法处理声音信号。例如,利用具有任意型的频率响应曲线的过滤器或具有任意通过宽带的过滤器,能够进行声音信号的过滤。
此外,在时间同步部111进行时间同步之后,从声音获取部120获取的声音的声音数据,去除起因于声音输出装置发出的声音的声音数据(输出声音数据)的杂音成分的方法,能够采用任意的方法。因此,通过应用已知的回声消除器处理,能够容易实现有效的噪音去除。
此外,声音获取装置100也可以构成为基于声音输出装置200的扫描信号等,算出从各声音输出装置200到达声音获取装置100的音的各传送特性(例如,传送函数)。在这种情况下,加法部113基于该传送特性,从获取声音数据去除回声。由此,能够进一步提高声音获取装置中的音响回声去除性能。
此外,杂音去除系统1也可以仅由各装置间的距离为规定值以下的各装置构成。例如在空间传送的声音信号的强度衰减到规定的强度以下的距离上选择该规定值。此时,即使是声音输出装置输出的声音,也可以省略由该声音引起的音响回声的去除处理。由此,能够有效地执行回声去除处理。
另外,在通信网络NW1上的各装置中也可以共有表示各装置间的距离的信息和各装置的设置场所的GPS位置信息等。此外,也可以仅以存在于相同的区域内(室内)的装置构成杂音去除系统1。
另外,通信网络NW1上的各装置也可以构成为,其他的装置能够识别是否能够进行输出声音通知的请求和响应等。
在通过声音输出装置200的声音输出的开始时不在“声音获取期间”中的情况下,也可以不是直接开始声音输出,而是在其开始前传播“输出通知”。由此,在声音获取装置100没有从声音输出装置200接收到以前发送的输出通知请求的情况下,也可以向声音获取装置通知声音输出的开始。
此外,即使声音输出的开始时在“声音获取期间”中,声音输出装置200也可以代替仅向声音获取装置100通知声音输出的开始,传播输出通知。
声音输出装置200也可以构成为在与输出声音数据的传送相同的时刻开始声音输出。由此,声音输出装置200也能够去除从声音输出的开始时刻到输出声音数据的传送开始时刻为止输出的声音所引起的音响回声。
在实施方式1中,例如如根据用户操作指示的声音输出的无噪音的情况或根据用户操作指示的声音输出的暂时停止的情况等那样,如果在通过声音获取装置100的声音输出通知的请求中,声音输出装置200暂时停止声音输出动作,则也可以以结束来自声音输出装置200的传送的方式进行动作。这个也同样适用于实施方式2。
在暂时停止的情况下,声音输出装置200例如也可以将无声的输出声音数据传送到声音获取装置100。在实施方式2的情况下,在输出声音数据的传送停止之后,也可以不传播输出结束通知。
除此之外,本发明的概念不仅可以应用于专用的系统,例如也可以应用于具备声音获取功能的、便携电话机、PDA、数码照相机等任意的装置。即,通过将用于使计算机作为声音获取装置100或声音输出装置200发挥作用·动作的计算机程序安装到计算机上,能够实现本发明涉及的杂音去除系统、声音获取装置、声音输出装置。这样的程序,例如除了能够存储在记录介质后进行散发之外,还能够通过通信网络进行散发。
另外,本申请以2007年7月26日申请的日本国专利申请号2007-195219为基础,该申请所记载的内容全部包含在本说明书中。

Claims (17)

1.一种杂音去除系统,通过通信网络连接获取声音的至少一个声音获取装置和输出声音的至少一个声音输出装置,其特征在于,
上述声音获取装置包括:
声音数据获取单元,以该声音获取装置的声音获取动作的开始、或者上述声音输出装置的声音输出动作的开始为契机,获取上述声音输出装置输出的声音的声音数据;以及,
杂音去除单元,使用上述声音数据获取单元获取的声音数据,去除上述声音输出装置输出的声音。
2.根据权利要求1所述的杂音去除系统,其特征在于,
上述声音数据获取单元还包括:
通知单元,在以上述声音获取装置的声音获取动作的开始为契机获取上述声音数据的情况下,通过将进行声音获取动作的内容在上述通信网络传播来通知上述声音输出装置;以及,
请求单元,向响应于上述通知的上述声音输出装置,通过上述通信网络请求上述声音数据的传送,
上述声音输出装置包括:
声音数据传送单元,根据来自上述声音获取装置的请求,将该声音输出装置输出的声音的声音数据通过上述通信网络传送到上述请求的声音获取装置。
3.根据权利要求1所述的杂音去除系统,其特征在于,
上述声音输出装置包括:
通知单元,以该声音输出装置的声音输出动作的开始为契机,通过将进行声音输出动作的内容的通知在上述通信网络传播从而通知给上述声音获取装置;以及,
声音数据传送单元,对响应于上述通知单元的通知的上述声音获取装置,传送该声音输出装置输出的声音的声音数据。
4.根据权利要求1所述的杂音去除系统,其特征在于,
上述声音数据获取单元,在从上述声音输出装置提供表示上述声音输出装置输出的声音的声源的信息的情况下,从该声源获取上述声音数据。
5.一种声音获取装置,通过通信网络与声音输出装置连接,获取并利用声音,其特征在于,包括:
声音数据获取单元,以该声音获取装置的声音获取动作的开始、或者上述声音输出装置的声音输出动作的开始为契机,获取上述声音输出装置输出的声音的声音数据;以及,
杂音去除单元,使用上述声音数据获取单元获取的声音数据,从上述获取的声音去除上述声音输出装置输出的声音。
6.根据权利要求5所述的声音获取装置,其特征在于,
上述声音数据获取单元还包括:
通知单元,将该声音获取装置开始声音获取动作的内容经由上述通信网络进行传播,从而通知给上述声音输出装置;以及,
传送请求单元,对响应于上述通知单元的通知的上述声音输出装置,请求上述声音数据的传送,
上述杂音去除单元,根据上述传送请求单元的请求,使用从上述声音输出装置传送的上述声音数据去除杂音。
7.根据权利要求5所述的声音获取装置,其特征在于,
上述声音数据获取单元还包括:
通知接收单元,接收上述声音输出装置通过上述通信网络传播的、该声音输出装置开始声音输出动作的内容的开始通知和结束声音输出动作的内容的结束通知;以及,
传送请求单元,在上述通知接收单元从上述声音输出装置接收上述开始通知之后,到接收来自发送了该开始通知的上述声音输出装置的上述结束通知为止的期间,在上述声音获取装置开始声音获取动作的情况下,向发送了上述通知接收单元所接收的通知的上述声音输出装置,请求上述声音数据的传送,
上述杂音去除单元,根据上述传送请求单元的请求进行使用了从上述声音输出装置传送的上述声音数据的杂音去除。
8.根据权利要求5所述的声音获取装置,其特征在于,
上述声音数据获取单元还包括:
声源信息获取单元,从通过上述通信网络从上述声音输出装置接收的信息,获取表示该声音输出装置输出的声音的声源的声源信息,
基于上述声源信息获取单元获取的声源信息,从该声源获取上述声音数据。
9.根据权利要求5所述的声音获取装置,其特征在于,
上述杂音去除单元还包括:
同步单元,使该声音获取装置获取的声音与上述声音数据获取单元获取的声音数据同步。
10.根据权利要求5所述的声音获取装置,其特征在于,
上述杂音去除单元还包括:
延迟单元,基于从上述声音输出装置向该声音获取装置的声音传播使上述声音数据获取单元获取的声音数据延迟。
11.一种声音输出装置,通过通信网络与声音获取装置连接,使用声音数据输出声音,其特征在于,包括:
请求接收单元,接收上述声音获取装置传播到上述通信网络的、请求上述声音输出装置的声音输出动作的通知的输出通知请求和请求从上述声音输出装置向上述声音获取装置的声音数据的传送停止的传送停止请求;以及,
声音数据传送单元,在上述请求接收单元从上述声音获取装置接收到上述输出通知请求之后,到接收来自发送了该输出通知请求的上述声音获取装置的上述传送停止请求为止的期间,在该声音输出装置进行声音输出动作的情况下,通过上述通信网络将该声音输出装置输出的声音的声音数据传送到该声音获取装置。
12.根据权利要求11所述的声音输出装置,其特征在于,
还包括声源信息发送单元,通过上述通信网络将表示上述输出的声音的声源的声源信息发送到上述声音获取装置。
13.一种声音输出装置,通过通信网络与声音获取装置连接,使用声音数据输出声音,其特征在于,包括:
输出开始通知单元,以该声音输出装置开始声音输出动作为契机,将开始该声音输出动作的内容的开始通知传播到上述通信网络;以及,
声音数据传送单元,通过上述通信网络将上述声音输出装置输出的声音的声音数据传送到响应于上述开始通知的上述声音获取装置。
14.根据权利要求13所述的声音输出装置,其特征在于,
还包括声源信息发送单元,通过上述通信网络将表示上述输出的声音的声源的声源信息发送到上述声音获取装置。
15.一种计算机可读取的记录介质,其记录有程序,该程序使对通过通信网络与声音输出装置连接的、获取并利用声音的声音获取装置进行控制的计算机实现以下功能:
以该声音获取装置的声音获取动作的开始、或者上述声音输出装置的声音输出动作的开始为契机,获取上述声音输出装置输出的声音的声音数据的功能;以及,
使用获取的声音数据,从上述获取的声音去除上述声音输出装置输出的声音的功能。
16.一种计算机可读取的记录介质,其记录有程序,该程序使对通过通信网络与声音获取装置连接的、使用声音数据输出声音的声音输出装置进行控制的计算机实现以下功能:
接收上述声音获取装置传播到上述通信网络的、请求上述声音输出装置的声音输出动作的通知的输出通知请求和请求从上述声音输出装置向上述声音获取装置的声音数据的传送停止的传送停止请求的功能;以及,
从上述声音获取装置接收上述输出通知请求之后,到接收来自发送了该输出通知请求的上述声音获取装置的上述传送停止请求为止的期间,在该声音输出装置进行声音输出动作的情况下,通过上述通信网络将该声音输出装置输出的声音的声音数据传送到该声音获取装置的功能。
17.一种计算机可读取的记录介质,其记录有程序,该程序使对通过通信网络与声音获取装置连接的、使用声音数据输出声音的声音输出装置进行控制的计算机实现以下功能:
以该声音输出装置开始声音输出动作为契机,将开始该声音输出动作的内容的开始通知传播到上述通信网络的功能;以及,
通过上述通信网络将上述声音输出装置输出的声音的声音数据传送到响应于上述开始通知的上述声音获取装置的功能。
CN2008101443336A 2007-07-26 2008-07-25 杂音去除系统、声音获取装置、声音输出装置及记录介质 Expired - Fee Related CN101355600B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP195219/2007 2007-07-26
JP2007195219A JP4431836B2 (ja) 2007-07-26 2007-07-26 音声取得装置、雑音除去システム、及び、プログラム

Publications (2)

Publication Number Publication Date
CN101355600A true CN101355600A (zh) 2009-01-28
CN101355600B CN101355600B (zh) 2012-09-26

Family

ID=39831599

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008101443336A Expired - Fee Related CN101355600B (zh) 2007-07-26 2008-07-25 杂音去除系统、声音获取装置、声音输出装置及记录介质

Country Status (5)

Country Link
US (1) US8165641B2 (zh)
EP (1) EP2019544A3 (zh)
JP (1) JP4431836B2 (zh)
KR (1) KR101017384B1 (zh)
CN (1) CN101355600B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102779525A (zh) * 2012-07-23 2012-11-14 华为终端有限公司 降噪方法及终端
CN105027541A (zh) * 2013-03-06 2015-11-04 高通股份有限公司 基于内容的噪声抑制
CN107240405A (zh) * 2017-06-14 2017-10-10 深圳市冠旭电子股份有限公司 一种音箱及告警方法
CN108429995A (zh) * 2017-02-14 2018-08-21 株式会社东芝 音响处理装置、音响处理方法以及存储介质
CN109521685A (zh) * 2017-12-29 2019-03-26 苏州乐轩科技有限公司 一种影音控制系统
CN109920437A (zh) * 2019-04-26 2019-06-21 北京小米智能科技有限公司 干扰去除的方法及装置

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101538383B1 (ko) * 2010-01-22 2015-07-21 엘지전자 주식회사 세탁기
TW201233178A (en) * 2011-01-28 2012-08-01 Hon Hai Prec Ind Co Ltd Apparatus and method for dialing VOIP on TV screen
JP5695447B2 (ja) * 2011-03-01 2015-04-08 株式会社東芝 テレビジョン装置及び遠隔操作装置
JP5870785B2 (ja) * 2012-03-19 2016-03-01 富士通株式会社 通信装置、信号処理プログラム、信号処理方法および通信システム
US9373338B1 (en) * 2012-06-25 2016-06-21 Amazon Technologies, Inc. Acoustic echo cancellation processing based on feedback from speech recognizer
KR101462055B1 (ko) * 2012-09-04 2014-11-17 에스케이 텔레콤주식회사 다중 홈 미디어 컨텐츠 공유를 수행하는 dlna 디바이스 및 그 방법
JP6314088B2 (ja) 2012-11-15 2018-04-18 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 情報提供方法及び情報提供装置
CN103888630A (zh) * 2012-12-20 2014-06-25 杜比实验室特许公司 用于控制声学回声消除的方法和音频处理装置
JP6064927B2 (ja) * 2014-02-10 2017-01-25 ソニー株式会社 オーディオ機器、音声処理方法、音声処理プログラム、音声出力方法および音声出力プログラム
CN104836927B (zh) * 2015-02-10 2017-09-15 数据通信科学技术研究所 一种语音同步方法和终端
US9640061B1 (en) * 2015-12-31 2017-05-02 Google Inc. Remote alarm hushing with acoustic presence verification
US10506192B2 (en) * 2016-08-16 2019-12-10 Google Llc Gesture-activated remote control
CN106792349A (zh) * 2016-12-15 2017-05-31 北京塞宾科技有限公司 一种三通道全息声场录音设备
CN106792367A (zh) * 2016-12-15 2017-05-31 北京塞宾科技有限公司 一种全息声场录音设备
JP6311784B2 (ja) * 2016-12-20 2018-04-18 ソニー株式会社 テレビジョン受像機、音声処理方法、音声処理プログラム、オーディオ機器、音声出力方法および音声出力プログラム
WO2020251430A1 (en) * 2019-06-11 2020-12-17 Telefonaktiebolaget Lm Ericsson (Publ) Method, ue and network node for handling synchronization of sound

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1148884C (zh) * 1999-12-28 2004-05-05 文化传信科技(澳门)有限公司 一种处理声音讯号的方法
JP4530587B2 (ja) * 2001-07-30 2010-08-25 株式会社リコー 放送受信装置
JP2003124849A (ja) 2001-10-17 2003-04-25 Fujitsu Ltd エコーキャンセラ及びその方法
JP2004080143A (ja) 2002-08-12 2004-03-11 Canon Inc 通信装置及びその管理方法、テレビ電話システム
US7230955B1 (en) * 2002-12-27 2007-06-12 At & T Corp. System and method for improved use of voice activity detection
JP2005084253A (ja) * 2003-09-05 2005-03-31 Matsushita Electric Ind Co Ltd 音響処理装置、方法、プログラム及び記憶媒体
KR100560750B1 (ko) * 2003-12-04 2006-03-13 삼성전자주식회사 홈네트워크의 음성 인식 시스템
JP4247994B2 (ja) 2004-12-27 2009-04-02 株式会社カシオ日立モバイルコミュニケーションズ 移動通信端末、基地局およびレジストレーション制御方法
KR100617109B1 (ko) * 2004-12-29 2006-08-31 엘지전자 주식회사 통신 단말기용 잡음 제거 장치
JP4465661B2 (ja) 2005-03-01 2010-05-19 株式会社カシオ日立モバイルコミュニケーションズ 移動通信端末及び通信制御方法
JP4086200B2 (ja) 2005-05-27 2008-05-14 株式会社カシオ日立モバイルコミュニケーションズ 無線通信端末
JP2006340321A (ja) 2005-06-06 2006-12-14 Canon Inc ネットワークシステム及びネットワークシステムにおける通信方法
US9049402B2 (en) * 2005-09-19 2015-06-02 Nxp, B.V. Method of synchronizing the playback of an audio broadcast on a plurality of network output devices

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102779525A (zh) * 2012-07-23 2012-11-14 华为终端有限公司 降噪方法及终端
WO2014015745A1 (zh) * 2012-07-23 2014-01-30 华为终端有限公司 降噪方法及终端
CN102779525B (zh) * 2012-07-23 2014-12-03 华为终端有限公司 降噪方法及终端
CN105027541A (zh) * 2013-03-06 2015-11-04 高通股份有限公司 基于内容的噪声抑制
CN105027541B (zh) * 2013-03-06 2018-01-16 高通股份有限公司 基于内容的噪声抑制
CN108429995A (zh) * 2017-02-14 2018-08-21 株式会社东芝 音响处理装置、音响处理方法以及存储介质
CN108429995B (zh) * 2017-02-14 2020-03-13 株式会社东芝 音响处理装置、音响处理方法以及存储介质
CN107240405A (zh) * 2017-06-14 2017-10-10 深圳市冠旭电子股份有限公司 一种音箱及告警方法
CN109521685A (zh) * 2017-12-29 2019-03-26 苏州乐轩科技有限公司 一种影音控制系统
CN109521685B (zh) * 2017-12-29 2022-08-05 苏州乐轩科技有限公司 一种影音控制系统
CN109920437A (zh) * 2019-04-26 2019-06-21 北京小米智能科技有限公司 干扰去除的方法及装置
CN109920437B (zh) * 2019-04-26 2021-03-09 北京小米智能科技有限公司 干扰去除的方法及装置

Also Published As

Publication number Publication date
EP2019544A2 (en) 2009-01-28
KR101017384B1 (ko) 2011-02-28
EP2019544A3 (en) 2016-03-23
KR20090012069A (ko) 2009-02-02
CN101355600B (zh) 2012-09-26
JP4431836B2 (ja) 2010-03-17
US20090030654A1 (en) 2009-01-29
JP2009033470A (ja) 2009-02-12
US8165641B2 (en) 2012-04-24

Similar Documents

Publication Publication Date Title
CN101355600B (zh) 杂音去除系统、声音获取装置、声音输出装置及记录介质
CN102823238B (zh) 媒体设施
CN100496104C (zh) 一种基于手机的视频信号转发系统
US8818466B2 (en) System and method for wireless home communications
CN109644216A (zh) 一种蓝牙通信的方法及终端
WO2011087370A1 (en) Method for pairing computer and video conference appliances
KR101614552B1 (ko) 다중 라디오 인터페이스를 가진 디바이스들간 객체 전송 방법
WO2007104212A1 (fr) Système et procédé associé de sonnette de logement terminal de réseau
CN105338393A (zh) 媒体同步方法和装置
US10827455B1 (en) Method and apparatus for sending a notification to a short-range wireless communication audio output device
CN105430161A (zh) 消息处理方法及装置
CN103238312B (zh) 控制音频信号
CN102340643A (zh) 记录再现装置
CN102710843A (zh) 一种可视固定电话
JP5861088B2 (ja) 集合住宅用インターホンシステム
JPS61270949A (ja) リモ−ト入出力装置
KR100706906B1 (ko) 화상 전화 통신망을 이용한 출입문 원격 감시 서비스 방법
JP2009246452A (ja) 同報無線システムの操作卓
JPS6065653A (ja) 放送装置
JPH04151957A (ja) オフトーク通信装置
CN105162968B (zh) 信息控制方法、装置及电子设备
KR20140109111A (ko) 통신 단말의 오디오 출력 제어 방법 및 장치
KR20070102008A (ko) 데이터 처리기능을 가지는 홈서버 및 그의 동작 방법
EP2078416A1 (en) Synchronization of wireless accessory and content delivery application
KR20100034462A (ko) 홈 네트워크 시스템의 영상 처리 방법 및 그 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: NEC CASIO MOBILE COMMUNICATIONS CO., LTD.

Free format text: FORMER OWNER: CASIO HITACHI MOBILE CO., LTD.

Effective date: 20100811

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: TOKYO, JAPAN TO: KANAGAWA, JAPAN

TA01 Transfer of patent application right

Effective date of registration: 20100811

Address after: Kanagawa, Japan

Applicant after: NEC CASIO Mobile Communications, Ltd.

Address before: Tokyo, Japan

Applicant before: Casio Hitachi Mobile Co., Ltd.

C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: NEC CORP.

Free format text: FORMER OWNER: NEC CASIO MOBILE COMMUNICATIONS, LTD.

Effective date: 20130710

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20130710

Address after: Tokyo, Japan

Patentee after: NEC Corp.

Address before: Kanagawa, Japan

Patentee before: NEC CASIO Mobile Communications, Ltd.

ASS Succession or assignment of patent right

Owner name: LENOVO INNOVATION CO., LTD. (HONGKONG)

Free format text: FORMER OWNER: NEC CORP.

Effective date: 20141124

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; TO: HONG KONG, CHINA

TR01 Transfer of patent right

Effective date of registration: 20141124

Address after: Hongkong, China

Patentee after: LENOVO INNOVATIONS Co.,Ltd.(HONG KONG)

Address before: Tokyo, Japan

Patentee before: NEC Corp.

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120926

Termination date: 20170725

CF01 Termination of patent right due to non-payment of annual fee