CN108028055A - 信息处理装置、信息处理系统和程序 - Google Patents
信息处理装置、信息处理系统和程序 Download PDFInfo
- Publication number
- CN108028055A CN108028055A CN201680054421.XA CN201680054421A CN108028055A CN 108028055 A CN108028055 A CN 108028055A CN 201680054421 A CN201680054421 A CN 201680054421A CN 108028055 A CN108028055 A CN 108028055A
- Authority
- CN
- China
- Prior art keywords
- sound
- reproduction
- unit
- information
- processing unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims description 89
- 238000012545 processing Methods 0.000 claims abstract description 169
- 238000000034 method Methods 0.000 claims description 40
- 230000005540 biological transmission Effects 0.000 claims description 39
- 238000004458 analytical method Methods 0.000 claims description 36
- 230000008569 process Effects 0.000 claims description 30
- 230000015572 biosynthetic process Effects 0.000 claims description 18
- 238000003786 synthesis reaction Methods 0.000 claims description 17
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims description 10
- 238000012937 correction Methods 0.000 claims description 2
- 230000006870 function Effects 0.000 description 39
- 230000000694 effects Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 11
- 230000004044 response Effects 0.000 description 8
- 230000001629 suppression Effects 0.000 description 8
- 230000008859 change Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 230000008030 elimination Effects 0.000 description 6
- 238000003379 elimination reaction Methods 0.000 description 6
- 230000005236 sound signal Effects 0.000 description 6
- 230000003068 static effect Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 210000005069 ears Anatomy 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 238000004904 shortening Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 230000009191 jumping Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000012856 packing Methods 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 241000208340 Araliaceae Species 0.000 description 1
- 241001269238 Data Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 241000956207 Picola Species 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 239000003638 chemical reducing agent Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000002427 irreversible effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 210000003454 tympanic membrane Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/002—Programmed access in sequence to a plurality of record carriers or indexed parts, e.g. tracks, thereof, e.g. for editing
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/005—Reproducing at a different information rate from the information rate of recording
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/782—Television signal recording using magnetic recording on tape
- H04N5/783—Adaptations for reproducing at a rate different from the recording rate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2225/00—Details of deaf aids covered by H04R25/00, not provided for in any of its subgroups
- H04R2225/41—Detection or adaptation of hearing aid parameters or programs to listening situation, e.g. pub, forest
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Neurosurgery (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
[问题]提供一种使用其能够平稳地重新收听音频的信息处理装置。[解决方案]提供了一种信息处理装置,该信息处理装置设置有再现处理单元,该再现处理单元基于开始所记录的音频的重新收听的重新收听开始指令、从如下时刻到赶上当前时刻进行再现,该时刻为从重新收听开始指令被输入的重新收听开始时刻起追溯预定时间的时刻。
Description
技术领域
本公开涉及信息处理装置、信息处理系统以及程序。
背景技术
提供了当用户错过助听装置中的一些声音时重新收听错过的声音的功能。根据专利文献1,例如,在执行处理使得可以容易地区分过去的声音信号和当前的输入声音之后,同时提供要被再次收听的过去的声音信号和当前的输入声音。
引用列表
专利文献
专利文献1:JP 2012-134919A
非专利文献
非专利文献1:Morita and Itakura的“Expansion and compression of soundin time axis using pointer interval controlled overlap and add(PICOLA)andevaluation thereof”,S61.10,第149至150页
非专利文献2:Noguchi、Bannai、Hata和Kataoka的“Distinction and removal ofsudden noise in 1-channel input signal”,Journal of The Acoustical Society ofJapan,第655至656页,2004年3月
非专利文献3:H.Kinoshita、M.Delcroix、T.Nakatani和M.Miyoshi 的“Suppression of late reverberation effect on speech signal using long-termmultiple-step linear prediction”,IEEE Trans.Audio,Speech and Lang.Proc.,第4期第17卷,第534至545页,2009年
发明内容
技术问题
然而,存在许多使用助听装置的用户通常难以收听多个扬声器的声音的情况。因此,即使如上述专利文献1那样可以区分两个声音,也存在同时声音提供作为重新收听再现是不充分的功能可能性。此外,由于用户期望再次收听的声音本身是用户曾经错过收听的声音,所以当用户再次聆听该声音时,用户有必要更专心收听该声音。从这个角度来看,不能声称同时提供过去的声音和当前的声音可以提供用户可以容易收听的声音,并且同时提供作为重新收听再现功能是不充分的。
此外,还存在一种设置有能够对用户所需的声音进行声音记录的语音备忘录功能的助听装置。然而,由于用户需要按下按钮等来明确地提供用于开始和结束声音记录的指令以及用于再现的指令,所以语音备忘录功能不便于在会话期间迅速地再现重新收听的声音。
因此,本公开提出了一种可以平稳地重新收听声音的、新的且改进的信息处理装置、信息处理系统和程序。
问题的解决方案
根据本公开,提供了一种信息处理装置,该信息处理装置包括:再现处理单元,其基于用于开始所记录的声音的重新收听的再现开始指令、从如下位置到当前时刻的位置对所记录的声音进行再现,该位置为从再现开始指令被输入的再现开始时刻起追溯预定时间的位置。
此外,根据本公开,提供了一种信息处理系统,该信息处理系统包括:第一设备,其获取并且输出声音;以及第二设备,其包括再现处理单元,该再现处理单元基于用于开始由第一设备获取的所记录的声音的重新收听的再现开始指令、从如下位置到当前时刻的位置对所记录的声音进行再现,该位置为从再现开始指令被输入的再现开始时刻起追溯预定时间的位置。
此外,根据本公开,提供了一种用于使计算机用作如下的程序:再现处理单元,其基于用于开始所记录的声音的重新收听的再现开始指令、从如下位置到当前时刻的位置对所记录的声音进行再现,该位置为从再现开始指令被输入的再现开始时刻起追溯预定时间的位置。
本发明的有益效果
因此,本公开提出了一种可以平稳地再现重新收听的声音的、新的并且改进的信息处理装置、信息处理系统和程序。注意,上述效果不必然是限制性的。与上述效果一起或代替上述效果,可以实现本说明书中描述的效果中的或可以从本说明书中领会的其他效果中的任何一种效果。
附图说明
图1是示出根据本公开的第一实施方式的助听系统的最小功能配置的功能框图。
图2是示出根据本实施方式的助听系统的另一功能配置的功能框图。
图3是示出作为根据本实施方式的信息呈现单元的显示示例的重新收听再现画面的说明图。
图4是示出由根据本实施方式的助听系统执行的重新收听再现处理的示例的流程图。
图5是示出图4的步骤S100中的再现状态的说明图。
图6是示出图4的步骤S120和S130中的再现状态的说明图。
图7是示出图4的步骤S150中的再现状态的说明图。
图8是示出图4的步骤S180中的再现状态的说明图。
图9是示出由根据本实施方式的助听系统执行的重新收听再现处理的另一示例的流程图。
图10是示出根据本公开的第二实施方式的助听系统的最小功能配置的功能框图。
图11是示出根据本实施方式的助听系统的另一功能配置的功能框图。
图12是示出根据本实施方式的信息处理装置的硬件配置的硬件配置图。
具体实施方式
在下文中,将参照附图详细描述本公开的优选实施方式。注意,在本说明书和附图中,用相同的附图标记表示功能和结构基本上相同的结构元件,并且省略对这些结构元件的重复说明。
在下文中,将描述作为根据本公开的信息处理系统的优选实施方式的、提供可以实时重新收听声音的功能的助听系统。这样的助听系统基于用于开始所记录的声音的重新收听的再现开始指令、从如下位置到当前时刻的位置对所记录的声音进行再现,该位置为从重新收听开始指令被输入的重新收听开始时刻起追溯预定时间的位置。如果记录的声音的再现到达当前时刻,则仅提供普通的实时声音。用户可以仅通过执行重新收听开始操作来平稳地执行对期望的声音的重新收听。此外,将在声音监测器包括听力辅助件(hearingassistant)和作为医疗工具的助听器的设想下呈现以下描述。
此外,将按照以下顺序进行描述。
1.第一实施方式(分离型:助听系统)
1.1系统配置
(1)最小配置
(2)采用的配置
1.2重新收听再现处理
(1)仅提供用于开始重新收听再现的指令的情况
(2)存在用于结束重新收听再现的指令的情况
1.3补充说明
(1)非平稳噪声抑制处理
(2)同时聆听重新收听的声音和实时声音
1.4结论
2.第二实施方式(集成型:助听装置)
(1)最小配置
(2)采用的配置
3.硬件配置示例
<1.第一实施方式>
[1.1系统配置]
首先,将参照图1和图2描述根据本公开的第一实施方式的助听系统的功能配置。根据本实施方式的助听系统包括:音频设备100,其获取声音并且输出声音;以及信息处理设备200,其执行对音频设备100的声音再现控制。
(1)最小配置
首先,将基于图1来描述根据本实施方式的助听系统的最小功能配置。作为最小功能,图1所示的助听系统除了普通的助听功能之外还能够执行重新收听再现功能。
(音频设备)
例如,音频设备100是由用户佩戴在他/她的耳朵上使用的部件,并且例如是通过连接至设置有信息处理功能的装置而被使用的耳机、头戴式耳机等。虽然假设佩戴在双耳上的闭合类型作为耳机的形状,但本公开不限于这样的示例。如图1所示,音频设备100包括声音输入单元110、音频设备数据发送单元120、音频设备数据接收单元130、信号合成选择单元140和声音输出单元150。
声音输入单元110是获取外部声音的声音监测单元,并且包括例如一个或更多个麦克风、A/D转换器等。声音输入单元110将周围的音频信号转换成数字波形数据,并且将数字波形数据输出至音频设备数据发送单元120。
音频设备数据发送单元120将从声音输入单元110输入的数字信号发送至信息处理设备200。数字信号可以通过有线传输或无线传输来传输。在无线传输的情况下,例如,传输可以通过蓝牙(注册商标)等来实现。
音频设备数据接收单元130接收从信息处理设备200接收到的重新收听的声音的经编码的波形数据。音频设备数据接收单元130将接收到的流数据解码成可以被执行信号处理的原始波形数据(PCM),并且将该数据输出至信号合成选择单元140。
信号合成选择单元140根据来自稍后将描述的控制输入单元220的输入来执行生成要从声音输出单元150输出的声音信号的处理,并且将声音信号输出至声音输出单元150。例如,当对获取的声音进行重新收听再现时,输出从信息处理设备200接收到的过去的声音,并且在其他情况下不输出重新收听的声音。
声音输出单元150是向用户提供声音的输出单元,并且例如包括D/A转换器、驱动器单元等。声音输出单元150将在被信号合成选择单元140进行处理之后的声音数字数据转换成音频信号,并且输出该音频信号。
在音频设备中,声音输入单元110和声音输出单元150可以在能够佩戴在双耳上的情况下针对左耳和右耳中的每一者执行独立操作或非独立操作。
(信息处理设备)
例如,信息处理设备200是设置有信息处理功能的设备,并且例如是能够与音频设备100配对的信息处理终端等,例如智能手机。信息处理设备200包括重新收听再现处理单元210、控制输入单元220、第一声音存储单元231和第二声音存储单元233。
重新收听再现处理单元210是执行用于记录的声音的重新收听再现的处理的功能单元,并且如图1所示的那样包括信息处理设备数据接收单元211、追踪再现信号处理单元213和信息处理设备数据发送单元215。
信息处理设备数据接收单元211接收来自音频设备数据发送单元120的数据流、对编码数据进行解码并且获取声音波形数据。信息处理设备数据接收单元211将获取的声音波形数据输出至追踪再现信号处理单元213。
追踪再现信号处理单元213分析从信息处理设备数据接收单元211输入的声音数据,并且根据来自控制输入单元220的输入来执行输出从追溯预定时间的时刻起的声音的处理。注意,在下文中,在被追踪再现信号处理单元213执行信号处理之后到达用户的耳朵的声音信号还被称为“重新收听的声音”,而在未经受过追踪再现信号处理单元213的信号处理的情况下到达用户耳朵的声音信号还被称为“实时声音”。追踪再现信号处理单元213可以根据来自控制输入单元220的输入在缩短再现时间的情况下再现重新收听的声音。例如,可以比未倍增的速度更快的再现速度对至少一部分再现声音进行再现。例如,该处理可以采用在不改变声音音高并且增大言语速度的情况下执行再现的技术(例如参见非专利文献1)。追踪再现信号处理单元213将生成的再现信号输出至信息处理设备数据发送单元215。
此外,作为另外的时间缩短的再现方法,可以自动检测不存在人声的时间区段或无声区段作为跳过目标区段,并且可以在跳过至少一部分跳过目标区段的情况下执行再现。例如,对于跳过目标区段的检测,可以基于其中声音音量水平不超过预定阈值的时间持续预定时间或更长时间的时间区段来进行确定。此外,也可以同时通过改变再现速度进行时间缩短以及通过跳跃再现进行时间缩短。
信息处理设备数据发送单元215对在被追踪再现信号处理单元213执行处理之后的声音进行编码,并且将经编码的声音发送至音频设备100。
控制输入单元220响应于来自用户的操作输入来控制音频设备100和信息处理设备200的功能。例如,控制输入单元220基于来自用户的操作输入,使得执行重新收听再现功能以及使得结束重新收听再现功能。此外,控制输入单元220基于来自用户的操作输入来进行音频设备100的声音音量等的各种设置。此外,尽管未在附图中示出,但由用户直接操作的设备不限于信息处理设备200。例如,还设想如下情况:通过用户操作作为与信息处理设备200分离的实体的计算机、远程控制器等以建立计算机、远程控制器等与信息处理设备200之间的通信,来将用户输入提供给控制输入单元220。
第一声音存储单元231存储已由信息处理设备数据接收单元211接收到并且已通过音频设备100获取的声音。由第一声音存储单元231记录的声音可以用作用于重新收听再现等的记录的声音。诸如记录在第一声音存储单元231中的声音的信息可以与记录在第一声音存储单元231中并行地记录在第二声音存储单元233中。在这种情况下,代替第一声音存储单元231,第二声音存储单元233可以用于重新收听再现等。例如,第一声音存储单元231可以是易失性存储器,而第二声音存储单元233可以是非易失性存储器或硬盘驱动器。
此外,在第一声音存储单元231或第二声音存储单元233的容量允许的情况下,与第一声音存储单元231或第二声音存储单元233中的记录的声音、声音特征量或时间戳记录有关的所有信息可以被累积并且记录,或者仅与预定时间长度对应的最新的信息可以被记录。由于前一种记录方法累积与较长时间对应的信息,所以可以提高追踪再现的自由度。根据后一种记录方法,可以节省所使用的存储单元的容量,并且考虑到所记录的信息是与其他人的隐私有关的信息,不会不必要地保存信息。
(2)采用的配置
接下来,将基于图2描述通过进一步将功能添加到作为基础的图1所示的具有最小配置的助听系统而实现的助听系统的配置示例。除了作为最小功能的助听功能和重新收听再现功能之外,图2所示的助听系统还包括声音分析功能、噪声消除功能等。在下文中,将主要描述新添加到具有图1所示的初次配置的助听系统的功能,并且省略对与图1中的助听系统的功能配置相同的功能配置的描述。
(音频设备)
如图2所示,音频设备100以与图1所示的音频设备100中的配置方式类似的方式包括声音输入单元110、音频设备数据发送单元120、音频设备数据接收单元130和声音输出单元150。此外,图2中的音频设备100包括声音特征计算单元121、时间戳信息生成单元123、第一信号合成选择单元141、实时声音处理单元143、第二信号合成选择单元145以及消除信号生成单元160。
声音输入单元110是获取外部声音的声音监测单元,并且以与图1中的声音输入单元110的配置方式类似的方式被配置。声音输入单元110将周围的音频信号转换成数字波形数据并且将该数字波形数据输出至声音特征计算单元121、第一信号合成选择单元141和消除信号产生单元160。此外,经转换得到的数字信号还响应于来自控制输入单元220的指令而被输出至音频设备数据发送单元120。
声音特征计算单元121根据从声音输入单元110输入的波形数据,来计算信息处理设备200的追踪再现信号处理单元213或声音分析处理单元212的操作所需的声音特征量。例如,声音特征计算单元121计算各个麦克风之间的每特定时间的幅度比和相位差,作为声音特征量。由声音特征计算单元121计算出的声音特征量被输出至音频设备数据发送单元120。
时间戳信息生成单元123响应于来自控制输入单元220的输入,生成要应用于通过音频设备数据发送单元120发送至信息处理设备200的数据的时间戳信息。例如在存在不向信息处理设备200发送无声时间区段的数字信号的操作的情况下等等,时间戳信息生成单元123生成要应用于要被发送的数字信号的时间区段的时间戳信息。由时间戳信息生成单元123生成的时间戳信息被发送至音频设备数据发送单元120。这是一种用于解决以下问题的方法:在如上所述的那样执行不向信息处理设备200发送无声时间区段的数字信号的操作的情况下等等,在信息处理设备200中,与连续发送的信号对应于哪个时间有关的信息被丢失,并且不能通过追溯预定时间来进行重新收听。
音频设备数据发送单元120以与图1中类似的方式输出从声音输入单元110输入的数字信号。数字信号可以通过有线传输或无线传输来传输。在无线传输的情况下,例如,传输可以通过蓝牙(注册商标)等来实现。此外,音频设备数据发送单元120还可以发送来自稍后将描述的实时声音处理单元143的输出而不是从声音输入单元110输入的声音信号,并且还可以动态地改变输出信号。此外,根据本实施方式的音频设备数据发送单元120还可以压缩由声音特征计算单元121所计算出的声音特征量的信息,并且将该信息与声音波形数据一起发送至信息处理设备200。在此,音频设备数据发送单元120执行简单的比特深度转换并且然后发送声音特征量。此外,在通过多个麦克风分别获取声音数据的情况下,音频设备数据发送单元120可以仅提取来自预定麦克风的输入、通过子带编解码器(SBC)对该输入执行编码处理、对信息进行编码、解码并且然后发送信息。
例如,音频设备数据发送单元120可以8kHz对从左耳的声音监测器的一个麦克风的输入得到的信号进行采样,针对每个转换长度帧将通过SBC编码的声音波形数据和进行简单的比特深度转换之后的声音特征量数据打包,并且发送打包的数据。在此,可以基于限定的唯一协议、通过串行端口配置文件(SPP)来对发送数据进行发送。此外,可以任意选择编码和解码方案,并且例如可以在如图1中的不使用声音特征量的系统中设置高级音频分配配置文件(A2DP)、耳机配置文件(HSP)、免提配置文件(HFP)等。数据可以通过使用SPP的唯一协议编码方案、A2DP、HSP或HFP来发送。
声音特征计算单元121用于在减少在音频设备100与信息处理设备200之间发送和接收的数据量的同时、确保声音分析处理单元212和追踪再现信号处理单元213的功能。例如,由于在前面的段落的描述中采用不可逆编码来发送和接收数据并且用于发送数据的信道和频带受到限制,所以从音频设备数据发送单元120发送到信息处理设备数据接收单元211的数据是一部分信息已被丢失的原始声音波形数据。因此,可以通过声音分析处理单元212和追踪再现信号处理单元213使用该波形数据实现的处理受到限制。例如,发生如下等事件:不能对需要双耳的输入声音波形的特征量和使用由于频带限制而丢失的高频信息的特征量进行计算。因此,在信息处理设备200侧的处理所需要的特征量中存在必须通过使用原始波形数据来进行计算的特征量的情况下,可以通过声音特征计算单元121计算该特征量并且将该特征量发送至信息处理设备200来实现期望的功能。
此外,音频设备数据发送单元120还可以基于通过声音特征计算单元121所计算出的声音特征量数据,例如在当前输入声音中不包括人声的情况下,选择不发送数据。在这种情况下,所发送的声音波形数据的时间区段的时间戳信息与从音频设备数据发送单元120发送到信息处理设备数据接收单元211的声音波形数据一起被发送至信息处理设备数据接收单元211。在这种情况下,声音特征计算单元121用于进一步减少在音频设备100与信息处理设备200之间发送和接收的数据量,这与前面段落中的描述不同。
音频设备数据接收单元130接收从信息处理设备200接收到的编码的重新收听声音流数据。音频设备数据接收单元130将接收到的流数据解码成可以被执行信号处理的波形数据(例如PCM),并且将波形数据输出至第一信号合成选择单元141或第二信号合成选择单元145。可替选地,也可以根据来自控制输入单元220的输入,动态地选择要将输入提供给第一信号合成选择单元141和第二信号合成选择单元145中的哪一者。在音频设备100和信息处理设备200如在根据本实施方式的助听系统中那样地被配置成彼此分离的情况下,需要用于编码、解码和无线传输的天线等,并且可以采用这些天线的一部分被包括在同一设备中的配置。在这种情况下,可以通过使用共享存储器而不压缩和扩展数据的简单数据交换来实现同一设备中的块之间的数据交换。
第一信号合成选择单元141和第二信号合成选择单元145响应于控制输入单元220的输入执行生成从声音输出单元150输出的声音信号的处理,并且将声音信号输出至声音输出单元150。从音频设备数据接收单元130到第一信号合成选择单元141或第二信号合成选择单元145中的仅任一者的输入信号是有效的,并且到另一者的输入信号在没有任何改变的情况下被输出。
具体地,响应于来自控制输入单元220的输入,第一信号合成选择单元141和第二信号合成选择单元145分别对实时声音和重新收听的声音执行处理、合成声音并且将合成的声音输出至声音输出单元150。在仅再现实时声音的情况下,例如,通过将实时声音乘以“1”、将重新收听的声音乘以“0”并且对两者求和来获得输出信号。此外,在仅再现重新收听的声音的情况下,通过将实时声音乘以“0”、将重新再听的声音乘以“1”并且对两者求和来获得输出信号。此外,可以通过对实时声音和重新收听的声音执行单独的处理并且叠加实时声音和重新收听的声音两者来获得输出信号。
实时声音处理单元143是以与一般声音监测器的方式类似的方式、低延迟地对从声音输入单元110获得的声音执行信号处理的声音处理单元。实时声音处理单元143执行例如通过多个麦克风的波束形成处理、反馈消除或抑制处理、静态/非静态噪声抑制、声音放大、均衡化、通过压缩器等执行的处理等,并且用户可以实时收听输出。
声音输出单元150是向用户提供声音的输出单元,并且包括例如D/A转换器、驱动器单元等。声音输出单元150将已被第一信号合成选择单元141和第二信号合成选择单元145执行处理的声音数字数据转换成音频信号,并且输出该音频信号。
消除信号生成单元160执行信号处理以实现噪声消除功能。消除信号生成单元160生成消除即使安装有声音监测器仍从外部泄漏并到达耳膜的声音的消除信号。生成的消除信号与来自实时声音处理单元143的输出合成,并且然后从声音输出单元150输出。
此外,音频设备100中的声音输入单元110、实时声音处理单元143和声音输出单元150可以针对左耳和右耳中的每一者执行独立操作或者可以执行非独立操作。
(信息处理设备)
信息处理设备200是设置有信息处理功能的设备,并且例如是能够与音频设备100配对的信息处理终端等,例如智能手机。如图2所示,信息处理设备200包括重新收听再现处理单元210、控制输入单元220、第一声音存储单元231和第二声音存储单元233。此外,根据本实施方式的信息处理设备200包括信息呈现单元240。
重新收听再现处理单元210是执行用于再现所记录的重新收听声音的处理的功能单元,并且如图2所示的那样包括信息处理设备数据接收单元211、声音分析处理单元212、追踪再现信号处理单元213和信息处理设备数据发送单元215。
信息处理设备数据接收单元211接收来自音频设备数据发送单元120的数据流、对经编码的数据进行解码并且获取声音波形数据。信息处理设备数据接收单元211将所获取的声音波形数据输出至声音分析处理单元212和追踪再现信号处理单元213。
声音分析处理单元212分析从信息处理设备数据接收单元211输入的声音特征量和声音波形数据,并且提取追踪再现信号处理和对用户进行信息呈现所需要的信息。作为用于追踪再现信号处理的分析,声音分析处理单元212可以通过例如根据波形数据在特定时间计算信号的功率和自相关系数并且应用低通滤波器来提取信息。然后,声音分析处理单元212可以在信号的功率和自相关系数的值在预定时间内超过阈值时将该时间视为“声音存在区段”,并且将该信息输出至追踪再现信号处理单元213。
此外,作为用于信息的呈现的分析,声音分析处理单元212可以通过例如采用由声音特征计算单元121所计算出的声音特征量(麦克风之间的幅度比和相位差)的暂时差并且应用低通滤波器来提取信息。然后,声音分析处理单元212可以将值超过特定阈值的位置视为“人类讲话者的变化点”,并且将该信息输出至信息呈现单元240。此外,如果将信息处理设备200是智能电话并且在作为信息呈现单元240的显示器上显示声音波形的情况作为另一具体示例进行考虑,则可以通过声音分析处理单元212执行用于在显示器上的有限显示区域中以高可视性显示波形的处理。在此时,在应用了例如用于从声音波形数据中拾取仅人类的声音频带中的波形的带通滤波器之后,声音分析处理单元212可以用竖直线显示若干样本(例如005sec)的最大值和最小值的范围,而不是显示样本值本身。以这种方式,可以容易理解声音波形数据的方式向用户呈现声音波形数据。
追踪再现信号处理单元213分析从信息处理设备数据接收单元211输入的声音数据,并且根据来自控制输入单元220的输入来执行处理以输出从追溯预定时间的时刻起的声音。此外,在被追踪再现信号处理单元213执行信号处理之后到达用户耳朵的声音信号在下面将被称为“重新收听的声音”。同时,在未被追踪再现信号处理单元213执行信号处理的情况下到达用户耳朵的声音信号将被称为“实时声音”。追踪再现信号处理单元213可以响应于来自控制输入单元220的输入而缩短重新收听的声音的时间并且再现重新收听的声音。例如,可以比未倍增的速度更快的再现速度来对至少一部分重新收听的声音进行再现。例如,处理可以采用在不改变声音音高并且增大言语速度的情况下执行再现的技术(例如参见非专利文献1)。追踪再现信号处理单元213将所生成的再现信号输出至信息处理设备数据发送单元215。
此外,作为另外的时间缩短的再现方法,可以自动检测不存在人声的时间区段或无声区段作为跳过目标区段,并且可以在跳过至少一部分跳过目标区段的情况下执行再现。例如,对于跳跃目标区段的检测,可以基于其中声音音量水平不超过预定阈值的时间持续预定时间或更长时间的时间区段来进行确定。此外,也可以同时通过改变再现速度进行时间缩短以及通过跳跃再现进行时间缩短。
信息处理设备数据发送单元215对已被追踪再现信号处理单元213进行处理的声音进行编码,并且将该声音发送至音频设备100。
控制输入单元220响应于来自用户的操作输入来控制音频设备100和信息处理设备200的功能。例如,控制输入单元220基于来自用户的操作输入使得执行重新收听再现功能或者使得结束重新收听再现功能。此外,控制输入单元220基于来自用户的操作输入来进行音频设备100的声音音量等的各种设置。此外,尽管未在附图中示出,但由用户直接操作的设备不限于信息处理设备200。例如,还设想如下情况:通过用户操作作为与信息处理设备200分离的实体的计算机、远程控制器等以建立计算机、远程控制器等与信息处理设备200之间的通信,来将用户输入提供给控制输入单元220。
第一声音存储单元231存储已由信息处理设备数据接收单元211接收到并且已通过音频设备100获取的声音。在此,声音特征量和时间戳信息可以一起存储在第一声音存储单元231中。记录在第一声音存储单元231中的声音可以用作重新收听再现中的记录的声音。记录在第一声音存储单元231中的诸如声音的信息可以与记录在与第一声音存储单元231中并行地记录在第二声音存储单元233中。在这种情况下,代替第一声音存储单元231,第二声音存储单元233可以用于重新收听再现等。例如,第一声音存储单元231可以是易失性存储器,而第二声音存储单元233可以是非易失性存储器或硬盘驱动器。
此外,在第一声音存储单元231或第二声音存储单元233的容量允许的情况下,与第一声音存储单元231或第二声音存储单元233中的记录的声音、声音特征量或时间戳记录有关的所有信息可以被累积并且记录,或者仅与预定时间长度对应的最新的信息可以被记录。由于前一种记录方法累积与较长时间对应的信息,所以可以提高追踪再现的自由度。根据后一种记录方法,可以节省所使用的存储单元的容量,并且考虑到所记录的信息是与其他人的隐私有关的信息,不会不必要地保存信息。
信息呈现单元240是基于从声音分析处理单元212输入的信息来显示静止图像、运动图像、文字信息等的功能单元,并且例如是显示器等。此外,信息呈现单元240不仅包括显示器本身,并且还包括使显示器显示信息的显示处理单元。此外,尽管在附图中未示出,但信息呈现单元240不必然与信息处理设备200集成。即,信息呈现单元240可以并入与信息处理设备200物理分离的设备中、通过有线或无线通信来接收要通过运动图像、声音信息等呈现的静止图像、运动图像、文字信息等,并且将静止图像、运动图像、文字信息等呈现给用户。如上所述的那样与信息处理设备200物理分离的信息呈现单元240包括例如电视机、平板终端、PC等。
此处,图3示出了作为根据本实施方式的信息呈现单元240的显示示例的重新收听再现画面10。重新收听再现画面10是用于进行重新收听再现功能的各种设置的画面。此外,重新收听再现画面10不限于图3所示的配置并且可以适当地被改变。
可以在重新收听再现画面10上显示时间线显示区域11,该时间线显示区域11将通过对过去的预定时间(例如60秒)中的数据进行缓冲获得的并且从声音分析处理单元212输入的声音波形数据作为图像进行显示。例如,划分言语区段的开始位置和结束位置的线(例如,线11a至11d)可以显示在与已通过声音分析处理单元212进行分析的讲话者的改变点的时刻对应的位置处。此外,可以在声音波形数据图像中显示指示当前重新收听再现位置的线LTp。例如,在信息呈现单元240包括触摸传感器等以能够用手指等直接操作显示在信息呈现单元240中的信息的情况下,重新收听再现位置也可以通过改变该线LTp在时间轴上的位置来改变。
此外,重新收听再现画面10可以呈现指示追踪再现信号处理单元213的当前操作状态的信息。例如,可以显示当前由追踪再现信号处理单元213输出的并且通过音频设备100被用户听到的声音在当前时刻之前多长时间(例如,之前多少秒)。此外,如图3所示,可以在重新收听再现画面10中设置重新收听再现开始按钮(回放按钮)12、重新收听再现结束按钮(停止按钮)13和重新收听位置设置单元14。如果按压重新收听再现开始按钮12,则可以开始重新收听再现处理,并且如果按压重新收听再现结束按钮13,则可以结束重新收听再现处理。此外,重新收听位置设置单元14可以设置要从重新收听再现开始时刻起追溯多长时间以再现所记录的声音。在图3所示的示例中,从重新收听再现开始时刻起追溯三秒的时刻起再现声音。
此外,重新收听再现画面10还可以包括言语速度调节单元15,该言语速度调节单元15设置重新收听处理中的再现速度。在图3的示例中,可以通过滑动按钮部分15a来增大或减小重新收听再现处理中的再现速度。此外,还可以在重新收听再现处理中改变多个分割区段中的再现速度,并且在这种情况下,言语速度调节单元15可以被设置成与可以设置再现速度的区段的数目对应。此外,除了图3的示例之外,还可以通过输入诸如“1.5倍速度”的数值来设置再现速度,并且在设置无声区段被跳过的跳过模式的情况下,可以显示指示设置了跳过模式的图标、文字等。
[1.2.重新收听再现处理]
在下文中,将针对由根据本实施方式的助听系统进行的重新收听再现处理来描述两种情况。在以下两种情况下,将在以下设想下呈现描述:从重新收听开始位置起追溯的时间被预先设置成使得“从当前起的过去五秒中的声音被重新收听”,并且不会同时聆听实时声音和重新收听的声音。此外,通过使用以比未倍增的速度更快的速度执行再现的示例作为由追踪再现信号处理单元213执行的时间缩短的再现方法来呈现描述。
(1)仅提供用于开始重新收听再现的指令的情况
首先,将基于图4至图8描述由根据本实施方式的助听系统执行的重新收听再现处理。此外,图4是示出由根据本实施方式的助听系统执行的重新收听再现处理的流程图。图5至图8是用于说明由根据本实施方式的助听系统执行的重新收听再现处理的说明图。此外,Tnow表示当前时刻的位置,并且Tp表示图5至图8中的重新收听再现位置。此外,T1表示重新收听再现操作被输入的时刻,T2表示从T1朝向过去追溯所设置的追溯时间的时刻,并且T3表示重新收听再现位置到达当前时刻的时刻。
图4所示的重新收听再现处理的流程图示出了仅提供用于开始重新收听再现的指令的情况。即,该流程图示出了在存在用于开始重新收听再现的操作输入之后不执行操作以进行到对实时声音的再现的情况。
如图4所示,在由根据本实施方式的助听系统执行的重新收听再现处理中,如果首先用户输入用于开始重新收听再现的操作(S100),则控制输入单元220开始通过重新收听再现处理单元210进行的重新收听再现处理。例如,用于开始重新收听再现的操作可以是按压图3所示的重新收听再现画面10中的重新收听再现开始按钮12的操作。控制输入单元220使重新收听再现处理单元210开始重新收听再现处理,并且向音频设备100提供指令,使得从声音输出单元150输出的声音仅是重新收听的声音(S110)。然后,将再现位置改变为追溯预定的追溯时间的位置(S120),并且开始声音强调处理之后的重新收听的声音的再现(S130)。此外,在步骤S130中不必然执行声音强调处理,并且可以在不执行声音强调处理的情况下再现重新收听的声音。
如图5所示,例如,假设在从开始记录起逝去时间T1之后的时刻处执行步骤S100中的开始重新收听再现的操作。将实时声音输出给用户直到执行该操作为止,并且将实时声音记录在第一声音存储单元231中。在通过开始重新收听再现而在步骤S110中仅输出重新收听的声音之后,在步骤S120中如图6所示的那样从时刻T2起开始对重新收听的声音的再现,时刻T2为从时刻T1追溯预定的追溯时间的时刻。在图6的示例中,追溯时间被设置成十五秒,并且如果执行开始重新收听再现的操作的时刻T1例如是十五分钟三十秒,则从时刻T1追溯十五秒的时刻T2(即,十五分十五秒)的位置起重复重新收听的声音。
在步骤S130中,在重新收听的声音的再现区段中以第一再现速度再现重新收听的声音。可以预先设置或可以由用户设置第一再现速度。由于用户期望再次检查该区段中的声音的内容,所以通常将第一再现速度设置成等于或慢于未倍增的速度的再现速度。当然,第一再现速度可以被设置成比未倍增的速度快的再现速度。
返回到图4的描述,执行步骤S130中的重新收听的声音的再现直到重新收听再现位置Tp到达重新收听开始时刻T1为止(S140)。然后,如果重新收听再现位置Tp到达重新收听开始时刻T1,则追踪再现信号处理单元213在从位置Tp到当前时刻位置Tnow的区段中以第二再现速度再现重新收听的声音(S150)。由于需要使重新收听再现位置Tp到达区段中的当前时刻,因此第二再现速度被设置成比未倍增的速度快的速度。然后,当在第一声音存储单元231中不存在已被缓冲并且尚未被再现的重新收听的声音时(S160),即,当重新收听再现位置Tp到达当前时刻位置Tnow时,由追踪再现信号处理单元213执行的重新收听再现处理结束。然后,控制输入单元220提供指令,使得从声音输出单元150输出到音频设备100的声音仅是实时声音(S170),并且仅向用户提供由实时声音处理单元143进行的声音强调处理之后的实时声音(S180)。
图7示出了重新收听再现位置Tp到达重新收听开始时刻T1之后的重新收听的声音的再现状态。如图7所示,在步骤S150中,在区段中以比未倍增的速度快的第二再现速度执行再现。之后,如果重新收听再现位置Tp到达当前时刻位置Tnow,则重新收听的声音的再现结束,并且如图8所示的那样仅输出实时声音。
(2)存在用于结束重新收听再现的指令的情况
接下来,将基于图9描述由根据本实施方式的助听系统执行的重新收听再现处理的另外的情况。此外,图9是示出在存在用于结束重新收听再现的指令的情况下的重新收听再现处理的流程图。即,示出了以下情况:在存在用于开始重新收听再现的操作输入之后,从用户接收到用于结束重新收听再现的操作输入,以进行到对重新收听的声音的时间缩短的再现和对实时声音的再现。在下文中,将主要描述与图4所示的重新收听再现处理不同的处理,并且将省略对相同处理的详细描述。
如图9所示,在由根据本实施方式的助听系统执行的重新收听再现处理中,如果首先从用户输入开始重新收听再现的操作(S200),则控制输入单元220开始通过重新收听再现处理单元210进行的重新收听再现处理。控制输入单元220开始通过重新收听再现处理单元210进行的重新收听再现处理,并且向音频设备100提供指令,使得从声音输出单元150输出的声音仅是重新收听的声音(S210)。然后,将再现位置改变为追溯预定的追溯时间的位置,并且开始在声音强调处理之后的重新收听的声音的再现(S220)。步骤S200至S220中的处理与图4中的步骤S100至S130中的处理相同。此外,在步骤S220中不必然执行声音强调处理,并且可以在不执行声音强调处理的情况下再现重新收听的声音。
此处,假设在步骤S220中的重新收听的声音的再现期间、在重新收听再现位置Tp到达重新收听开始时刻T1之前存在来自用户的用于结束重新收听再现的操作输入(S230)。追踪再现信号处理单元213响应于操作输入将重新收听再现位置Tp移动到重新收听开始时刻T1(S240),并且在从重新收听开始时刻T1到重新收听再现位置Tp到达当前时刻位置Tnow的区段中,以第二再现速度再现重新收听的声音(S250)。由于在该区段中需要以与图4的步骤S150中的方式类似的方式使重新收听再现位置Tp到达当前时刻,所以第二再现速度被设置成比未倍增的速度快的速度。
然后,当在第一声音存储单元231中不存在已被缓冲并且尚未被再现的重新收听的声音(S260)时,即,当重新收听再现位置Tp到达当前时刻位置Tnow时,由追踪再现信号处理单元213进行的重新收听再现处理结束。然后,控制输入单元220向音频设备100提供指令,使得从声音输出单元150输出的声音仅是实时声音(S270),并且仅向用户提供由实时声音处理单元143执行的声音强调处理之后的实时声音。步骤S250至S280中的处理与图4的步骤S150至S180中的处理相同。如上所述,即使在用户明确地结束重新收听再现处理的情况下,也可以在步骤S250的区段中听到重新收听再现处理期间的实时声音。
虽然在图9的示例中已经描述了在重新收听再现位置Tp到达重新收听开始时刻T1之前存在来自用户的用于结束重新收听再现的操作输入的情况,但即使在重新收听再现位置Tp到达重新收听开始时刻T1之后,用户也可以执行用于结束重新收听再现的操作输入。在这种情况下,例如,追踪再现信号处理单元213还可以增大重新收听的声音的再现速度或可以结束对重新收听的声音的再现本身。
此外,还考虑了用户连续地改变重新收听再现位置Tp的情况,并且在这种情况下,可以在每次进行输入时,通过从用于开始重新收听再现的操作被输入的时刻起追溯预定时间来开始对重新收听的声音的再现。
[1.3.补充说明]
由于根据本实施方式的助听系统可以对所获取的声音信号进行重新收听再现,所以可以执行预测声音信号的声音处理或需要计算时间的处理。因此,可以更高的质量实现声音强调。
(1)非平稳噪声抑制处理
例如,根据本实施方式的助听系统可以执行非平稳噪声抑制处理。诸如键盘打字声音或者开门或关门的一些对象碰撞的非平稳噪声对耳朵而言是不适宜的并且是要被抑制的目标。同时,由于声音的辅音部分对于聆听声音是重要的,所以需要确保再现这些部分。然而,声音的辅音部分和如上所述的诸如碰撞噪声的非平稳噪声具有能量瞬时聚焦在高频区域的共同特征,并且仅通过观察瞬时信号难以区分这两者。
因此,在信号已被缓冲并且将以一定程度的时间延迟被再现的设想下,可以通过追踪再现信号处理单元213执行非平稳噪声抑制处理以抑制例如碰撞声音的非平稳噪声,来以令人满意的准确度来区分并且移除突然的噪声。非专利文献2中描述的信号处理技术例如可以应用于非平稳噪声抑制处理。由于非专利文献2中描述的方法使用在要处理的时间区段之前和之后的信号作为线索,所以由于相对较大的计算量和必要的处理时间而难以通过实时声音处理单元143执行该方法。然而,由于时间限制和计算成本是宽松的,所以根据本实施方式的助听系统的重新收听再现处理可以执行非平稳噪声抑制处理。
(2)同时聆听重新收听的声音和实时声音
在期望重复聆听的声音很长并且在声音期间需要用户本人以某种方式作出响应的情况下,优选地提供同时聆听重新收听的声音和实时声音的功能。因此,根据本实施方式的助听系统可以在包括再现重新收听的声音的功能的情况下实现同时聆听重新收听的声音和实时声音。
该声音可以被第一信号合成选择单元141和第二信号合成选择单元145合成。然而,如果重新收听的声音和实时声音两者简单地彼此相加,则存在变得难以聆听这两个声音两者的可能性。因此,可以对重新收听的声音和实时声音中的至少任一者的声音信号进行处理,使得两者彼此可以容易地区分。尽管可以由第一信号合成选择单元141和第二信号合成选择单元145处理声音信号,但具有较少的计算成本限制和较少的计算时间限制的追踪再现信号处理单元213可以处理重新收听的声音。
具体地,例如,通过执行非专利文献3中描述的回声抑制处理,可以将重新收听的声音处理成与实时声音相比听起来像干声(dry sound)和附近的声音。可替选地,也可以通过应用头部传递函数或房间脉冲响应(或具有等效效果的手段)滤波器将重新收听的声音处理成就好像声音是在与实时声音的环境不同的环境中生成的。假设处理包括头部中的定位的测量,使声源位置不清楚等。此外,可以通过声音音高转换技术提高(或降低)重新收听的声音的音高,或者可以应用用于变声器的效果,以将重新收听的声音处理成听起来与实时声音不同。此外,根据作为所谓的声音分析合成技术之一的声码器技术,可以通过替换频谱包络、音高信息和频谱包络的分离,转换重新收听的声音的音质,或者可以通过替换音高信息,改变重新收听的声音的音高。
[1.4.结论]
上面已经描述了根据本实施方式的助听系统的配置及其重新收听再现处理。根据本实施方式,即使用户错过了声音,用户也可以立即再现在会话期间错过的重新收听的声音,并且可以平稳地在重新收听的声音的再现和普通再现(即,实时声音的收听)之间切换。此外,根据本实施方式的助听系统可以提供可以容易聆听的重新收听的声音。
<2.第二实施方式>
接下来,将基于图10和图11描述根据本公开的第二实施方式的助听装置300。根据本实施方式的助听装置300具有将根据第一实施方式的助听系统组装在一个设备中的配置。在下文中,将描述根据本实施方式的助听装置300的最小配置和在将诸如噪声消除功能的功能添加到最小配置的情况下的配置示例。此外,图10与图1所示的根据第一实施方式的助听系统的配置对应,并且图11与图2所示的根据第一实施方式的助听系统的配置对应。因此,将省略对各个功能的详细描述。
(1)最小配置
首先,将基于图10描述根据本实施方式的助听装置300的最小功能配置。除了作为最小功能的普通助听功能之外,图10所示的助听系统还能够执行重新收听再现功能。
如图10所示,助听装置300包括声音输入单元310、追踪再现信号处理单元320、信号合成选择单元330、控制输入单元340、声音输出单元350、第一声音存储单元361以及第二声音存储单元363。在该助听装置300中,与图1的助听系统相比,省略了在各设备之间发送和接收数据的功能单元。声音输入单元310对应于声音输入单元110,并且追踪再现信号处理单元320对应于追踪再现信号处理单元213。此外,信号合成选择单元330对应于信号合成选择单元140,并且控制输入单元340对应于控制输入单元220。此外,声音输出单元350对应于声音输出单元150,第一声音存储单元361对应于第一声音存储单元231,并且第二声音存储单元233对应于第二声音存储单元363。由于各个功能单元的功能类似于第一实施方式中的功能单元的功能,所以将省略详细描述。包括重新收听再现功能的一个设备可以如上所述的那样进行配置。
(2)采用的配置
接下来,将基于图11描述通过进一步将功能添加到作为基础的图10所示的具有最小配置的助听系统而实现的助听装置300的配置示例。除了作为最小功能的助听功能和重新收听再现功能之外,图11所示的助听装置300还包括声音分析功能、噪声消除功能等。在下文中,将对比图2所示的根据第一实施方式的助听系统,主要描述新添加到具有图10所示的初次配置的助听系统的功能。
如图11所示,助听装置300的功能粗略地可以分类成声音输入和输出单元302以及重新收听再现处理单元304。声音输入和输出单元302是实现图2的助听系统中的音频设备100的功能的处理单元,并且重新收听再现处理单元304是实现图2的助听系统中的信息处理设备200的功能的处理单元。与图2的助听系统相比,以与图10的助听装置300中的方式类似的方式,从这样的助听装置300中省略在设备之间发送和接收数据的功能单元。
就是说,声音输入和输出单元302包括声音输入单元310、第一信号合成选择单元331、实时声音处理单元333、第二信号合成选择单元335和消除信号生成单元370。这些部件分别与图2的音频设备100中的声音输入单元110、第一信号合成选择单元141、实时声音处理单元143、第二信号合成选择单元145、声音输出单元150和消除信号生成单元160对应。
此外,重新收听再现处理单元304包括追踪再现信号处理单元320和声音分析处理单元321。这些部件与图2的信息处理设备200中的追踪再现信号处理单元213和声音分析处理单元212对应。此外,助听装置300包括第一声音存储单元361、第二声音存储单元363和信息呈现单元380。这些部件分别与图2的助听系统中的第一声音存储单元231、第二声音存储单元233以及信息呈现单元240对应。由于各个功能单元的功能类似于第一实施方式中的功能单元的功能,所以将省略详细描述。然而,也可以如上所述的那样配置具有图2的助听系统的功能的设备。
<3.硬件配置示例>
最后,将描述根据实施方式的音频设备100、信息处理设备200和助听装置300的硬件配置示例。由于这些设备可以类似的方式配置,下面将通过例示信息处理设备200而呈现描述。图12是示出根据实施方式的信息处理设备200的硬件配置的硬件配置图。
如上所述,根据本实施方式的信息处理设备200可以被实现为包括计算机的处理设备。如图12所示,信息处理设备200被配置成包括中央处理单元(CPU)901、只读存储器(ROM)902、随机存取存储器(RAM)903和主机总线904a。此外,信息处理设备200被配置成包括桥接器904、外部总线904b、接口905、输入设备906、输出设备907、存储设备908,驱动器909、连接端口911以及通信设备913。
CPU 901用作算术处理设备和控制设备,并且根据各种程序控制信息处理设备200中的整体操作。此外,CPU 901可以是微处理器。ROM 902存储由CPU 901使用的程序、操作参数等。RAM 903暂时存储在CPU 901的执行中使用的程序、在执行中适当改变的参数等。这些部件通过由CPU总线等形成的主机总线904a互连。
主机总线904a通过桥接器904连接至诸如外围部件互连/接口(PCI)总线的外部总线904b。此外,主机总线904a、桥接器904和外部总线904b不必然被配置为单独的部件,并且它们的功能可以被合并到单个总线中。
输入设备906被配置成包括:用户可以通过其输入信息的输入装置,诸如鼠标、键盘、触摸面板、按钮、麦克风、开关、操纵杆;基于用户的输入生成输入信号并且将该输入信号输出至CPU 901的输入控制电路等。在一个示例中,输出设备907包括:显示设备,诸如液晶显示器(LCD)设备、有机发光二极管(OLED)设备或灯;以及声音输出设备,诸如扬声器。
存储设备908是信息处理设备200的存储单元的示例并且是用于存储数据的设备。存储设备908可以包括记录介质、将数据记录在记录介质中的记录设备、从记录介质读出数据的读出设备、删除记录在记录介质中的数据的删除设备等。存储设备908驱动硬盘并且存储由CPU 901执行的程序和各种类型的数据。
驱动器909是用于记录介质的读写器,并且被内置在信息处理设备200中或在外部附接至信息处理设备200。驱动器909读出记录在安装的磁盘、光盘、磁光盘或诸如半导体存储器的可移动记录介质中的信息,并且将该信息输出至RAM 903。
连接端口911是连接至外部设备的接口,并且是用于连接能够通过例如通用串行总线(USB)传送数据的外部设备的端口。此外,在一个示例中,通信设备913是由用于连接至通信网络5的通信设备等形成的通信接口。此外,通信设备913可以是与无线局域网(LAN)兼容的通信设备、与无线USB兼容的通信设备或通过接线进行通信的有线通信设备。
上面已经参照附图描述了本公开的优选实施方式,而本公开不限于上述示例。本领域技术人员可以在所附权利要求的范围内发现各种变型和修改,并且应当理解,它们将自然地落入本公开的技术范围内。
此外,本说明书中所描述的效果仅是说明性或示例性的效果,而非限制性的。即,与上述效果一起或者代替上述效果,根据本公开的技术可以实现根据本说明书的描述对于本领域技术人员而言清楚的其他效果。
此外,本技术也可配置如下。
(1)
一种信息处理装置,包括:
再现处理单元,所述再现处理单元基于用于开始所记录的声音的重新收听的再现开始指令、从如下位置到当前时刻的位置对所记录的声音进行再现,该位置为从所述再现开始指令被输入的再现开始时刻起追溯预定时间的位置。
(2)
根据(1)所述的信息处理装置,
其中,所述再现处理单元以第一再现速度对所记录的声音进行再现,直到所述再现开始时刻的位置为止,并且从所述再现开始时刻的位置到所述当前时刻的位置,以第二再现速度对所记录的声音进行再现。
(3)
根据(2)所述的信息处理装置,
其中,当在所述再现开始时刻的再现位置之前输入所记录的声音的再现结束指令时,所述再现处理单元将再现位置移动到所述再现开始时刻。
(4)
根据(2)或(3)所述的信息处理装置,
其中,所述第二再现速度等于或快于所述第一再现速度。
(5)
根据(2)至(4)中任一项所述的信息处理装置,
其中,所述第二再现速度比未倍增的速度快。
(6)
根据(1)至(5)所述的信息处理装置,
其中,所述再现处理单元通过跳过从所述再现开始时刻到所述当前时刻的区段中的至少一部分来执行所述再现。
(7)
根据(6)所述的信息处理装置,
其中,要被跳过的目标区段是不存在人声的时间区段或无声区段。
(8)
根据(1)至(7)中任一项所述的信息处理装置,还包括:
消除信号生成单元,其至少在所记录的声音的再现期间执行噪声消除功能。
(9)
根据(1)至(8)中任一项所述的信息处理装置,包括:
声音分析处理单元,其对所记录的声音进行分析,
其中,所述再现处理单元基于通过所述声音分析处理单元获得的分析结果,执行声音强调处理。
(10)
根据(1)至(8)中任一项所述的信息处理装置,包括:
声音分析处理单元,其对所记录的声音进行分析;以及
信息呈现单元,其基于通过所述声音分析处理单元获得的分析结果,呈现与所述声音有关的信息。
(11)
根据(10)所述的信息处理装置,
其中,所述信息呈现单元使显示器显示所获取的所述声音的声音波形。
(12)
根据(1)至(11)中任一项所述的信息处理装置,包括:
实时声音处理单元,其对输入声音执行预定声音校正处理并且输出实时声音。
(13)
根据(12)所述的信息处理装置,还包括:
信号合成选择单元,其基于控制输入来执行对所记录的声音和所述实时声音的再现处理。
(14)
根据(13)所述的信息处理装置,
其中,所述信号合成选择单元在再现所记录的声音时,不再现所述实时声音。
(15)
一种信息处理系统,包括:
第一设备,其获取并且输出声音;以及
第二设备,其包括再现处理单元,所述再现处理单元基于用于开始由所述第一设备获取的所记录的声音的重新收听的再现开始指令、从如下位置到当前时刻的位置对所记录的声音进行再现,该位置为从所述再现开始指令被输入的再现开始时刻起追溯预定时间的位置。
(16)
根据(15)所述的信息处理系统,
其中,所述第一设备还包括:
数据发送单元,其对要发送至所述第二设备的数据进行压缩,并且发送经压缩的数据;以及
数据接收单元,其对从所述第二设备接收到的数据进行扩展。
(17)
根据(16)所述的信息处理系统,
其中,所述第一设备还包括声音特征计算单元,所述声音特征计算单元计算包括在所获取的声音的波形数据中的特征量,并且
所述数据发送单元将所述特征量发送至所述第二设备。
(18)
根据(16)所述的信息处理系统,
其中,所述第一设备还包括声音特征计算单元,所述声音特征计算单元计算包括在所获取的声音的波形数据中的特征量,并且
所述数据发送单元基于所述特征量,来确定所获取的声音中的要发送至所述第二设备的声音区段,并且将所述声音区段发送至所述第二设备。
(19)
根据(15)至(18)中任一项所述的信息处理系统,
其中,所述第二设备包括信息呈现单元,所述信息呈现单元呈现与所记录的声音的再现有关的信息。
(20)
一种用于使计算机用作如下的程序:
再现处理单元,所述再现处理单元基于用于开始所记录的声音的重新收听的再现开始指令、从如下位置到当前时刻的位置对所记录的声音进行再现,该位置为从所述再现开始指令被输入的再现开始时刻起追溯预定时间的位置。
附图标记列表
100 音频设备
110 声音输入单元
120 音频设备数据发送单元
121 声音特征计算单元
123 时间戳信息生成单元
130 音频设备数据接收单元
140 信号合成选择单元
141 第一信号合成选择单元
143 实时声音处理单元
145 第二信号合成选择单元
150 声音输出单元
160 消除信号生成单元
200 信息处理设备
210 再现处理单元
211 信息处理设备数据接收单元
212 声音分析处理单元
213 再现信号处理单元
215 信息处理设备数据发送单元
220 控制输入单元
231 第一声音存储单元
233 第二声音存储单元
240 信息呈现单元
300 助听装置
302 声音输入和输出单元
304 再现处理单元
310 声音输入单元
320 再现信号处理单元
321 声音分析处理单元
330 信号合成选择单元
331 第一信号合成选择单元
333 实时声音处理单元
335 第二信号合成选择单元
340 控制输入单元
350 声音输出单元
361 第一声音存储单元
363 第二声音存储单元
370 消除信号生成单元
380 信息呈现单元
Claims (20)
1.一种信息处理装置,包括:
再现处理单元,所述再现处理单元基于用于开始所记录的声音的重新收听的再现开始指令、从如下位置到当前时刻的位置对所记录的声音进行再现,该位置为从所述再现开始指令被输入的再现开始时刻起追溯预定时间的位置。
2.根据权利要求1所述的信息处理装置,
其中,所述再现处理单元以第一再现速度对所记录的声音进行再现,直到所述再现开始时刻的位置为止,并且从所述再现开始时刻的位置到所述当前时刻的位置,以第二再现速度对所记录的声音进行再现。
3.根据权利要求2所述的信息处理装置,
其中,当在到达所述再现开始时刻之前输入所记录的声音的再现结束指令时,所述再现处理单元将再现位置移动到所述再现开始时刻。
4.根据权利要求2所述的信息处理装置,
其中,所述第二再现速度等于或快于所述第一再现速度。
5.根据权利要求2所述的信息处理装置,
其中,所述第二再现速度比未倍增的速度快。
6.根据权利要求1所述的信息处理装置,
其中,所述再现处理单元通过跳过从所述再现开始时刻到所述当前时刻的区段中的至少一部分来执行所述再现。
7.根据权利要求6所述的信息处理装置,
其中,要被跳过的目标区段是不存在人声的时间区段或无声区段。
8.根据权利要求1所述的信息处理装置,还包括:
消除信号生成单元,其至少在所记录的声音的再现期间执行噪声消除功能。
9.根据权利要求1所述的信息处理装置,包括:
声音分析处理单元,其对所记录的声音进行分析,
其中,所述再现处理单元基于通过所述声音分析处理单元获得的分析结果,执行声音强调处理。
10.根据权利要求1所述的信息处理装置,包括:
声音分析处理单元,其对所记录的声音进行分析;以及
信息呈现单元,其基于通过所述声音分析处理单元获得的分析结果,呈现与所述声音有关的信息。
11.根据权利要求10所述的信息处理装置,
其中,所述信息呈现单元使显示器显示所获取的所述声音的声音波形。
12.根据权利要求1所述的信息处理装置,包括:
实时声音处理单元,其对输入声音执行预定声音校正处理并且输出实时声音。
13.根据权利要求12所述的信息处理装置,还包括:
信号合成选择单元,其基于控制输入来执行对所记录的声音和所述实时声音的再现处理。
14.根据权利要求13所述的信息处理装置,
其中,所述信号合成选择单元在再现所记录的声音时,不再现所述实时声音。
15.一种信息处理系统,包括:
第一设备,其获取并且输出声音;以及
第二设备,其包括再现处理单元,所述再现处理单元基于用于开始由所述第一设备获取的所记录的声音的重新收听的再现开始指令、从如下位置到当前时刻的位置对所记录的声音进行再现,该位置为从所述再现开始指令被输入的再现开始时刻起追溯预定时间的位置。
16.根据权利要求15所述的信息处理系统,
其中,所述第一设备还包括:
数据发送单元,其对要发送至所述第二设备的数据进行压缩,并且发送经压缩的数据;以及
数据接收单元,其对从所述第二设备接收到的数据进行扩展。
17.根据权利要求16所述的信息处理系统,
其中,所述第一设备还包括声音特征计算单元,所述声音特征计算单元计算包括在所获取的声音的波形数据中的特征量,并且
所述数据发送单元将所述特征量发送至所述第二设备。
18.根据权利要求16所述的信息处理系统,
其中,所述第一设备还包括声音特征计算单元,所述声音特征计算单元计算包括在所获取的声音的波形数据中的特征量,并且
所述数据发送单元基于所述特征量,来确定所获取的声音中的要发送至所述第二设备的声音区段,并且将所述声音区段发送至所述第二设备。
19.根据权利要求15所述的信息处理系统,
其中,所述第二设备包括信息呈现单元,所述信息呈现单元呈现与所记录的声音的再现有关的信息。
20.一种用于使计算机用作如下的程序:
再现处理单元,所述再现处理单元基于用于开始所记录的声音的重新收听的再现开始指令、从如下位置到当前时刻的位置对所记录的声音进行再现,该位置为从所述再现开始指令被输入的再现开始时刻起追溯预定时间的位置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015205389 | 2015-10-19 | ||
JP2015-205389 | 2015-10-19 | ||
PCT/JP2016/074784 WO2017068858A1 (ja) | 2015-10-19 | 2016-08-25 | 情報処理装置、情報処理システム及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108028055A true CN108028055A (zh) | 2018-05-11 |
Family
ID=58556932
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680054421.XA Pending CN108028055A (zh) | 2015-10-19 | 2016-08-25 | 信息处理装置、信息处理系统和程序 |
Country Status (5)
Country | Link |
---|---|
US (2) | US10666995B2 (zh) |
EP (1) | EP3367382A4 (zh) |
JP (1) | JP6904255B2 (zh) |
CN (1) | CN108028055A (zh) |
WO (1) | WO2017068858A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111492673A (zh) * | 2018-06-08 | 2020-08-04 | 西万拓私人有限公司 | 用于传输用于听力设备的听力匹配应用中的处理状态的方法 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10666995B2 (en) | 2015-10-19 | 2020-05-26 | Sony Corporation | Information processing apparatus, information processing system, and program |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06259884A (ja) * | 1993-03-08 | 1994-09-16 | Sanyo Electric Co Ltd | 磁気再生装置 |
US5717818A (en) * | 1992-08-18 | 1998-02-10 | Hitachi, Ltd. | Audio signal storing apparatus having a function for converting speech speed |
JP2004205578A (ja) * | 2002-12-24 | 2004-07-22 | Toshiba Corp | 音声信号を無線通信する音声再生機器及び音声再生機器の消費電力制御方法 |
JP2005165183A (ja) * | 2003-12-05 | 2005-06-23 | Matsushita Electric Ind Co Ltd | 無線通信装置 |
JP2006203900A (ja) * | 2002-07-16 | 2006-08-03 | Advanced Media Inc | 音声認識サーバ及び音声認識システム |
CN1925698A (zh) * | 2005-08-31 | 2007-03-07 | 索尼株式会社 | 音频信号处理装置、音频信号处理方法、程序和输入装置 |
CN101071616A (zh) * | 2006-05-12 | 2007-11-14 | 索尼株式会社 | 信息处理系统、终端设备、信息处理方法及程序 |
US20110038496A1 (en) * | 2009-08-17 | 2011-02-17 | Spear Labs, Llc | Hearing enhancement system and components thereof |
CN104303228A (zh) * | 2012-05-10 | 2015-01-21 | 美国思睿逻辑有限公司 | 在噪音消除个人音频设备中误差信号含量控制的次级和泄漏路径模型的调适 |
JP2015139083A (ja) * | 2014-01-22 | 2015-07-30 | 日東電工株式会社 | 聴覚補完システム及び聴覚補完方法 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07129190A (ja) | 1993-09-10 | 1995-05-19 | Hitachi Ltd | 話速変換方法及び話速変換装置並びに電子装置 |
US6721710B1 (en) * | 1999-12-13 | 2004-04-13 | Texas Instruments Incorporated | Method and apparatus for audible fast-forward or reverse of compressed audio content |
CN1463441A (zh) * | 2001-04-20 | 2003-12-24 | 皇家菲利浦电子有限公司 | Mp3的特技播放 |
US6839446B2 (en) * | 2002-05-28 | 2005-01-04 | Trevor I. Blumenau | Hearing aid with sound replay capability |
JP2004104757A (ja) | 2002-07-16 | 2004-04-02 | Advanced Media Inc | 音声入力装置 |
US8365235B2 (en) * | 2007-12-18 | 2013-01-29 | Netflix, Inc. | Trick play of streaming media |
US8515089B2 (en) * | 2010-06-04 | 2013-08-20 | Apple Inc. | Active noise cancellation decisions in a portable audio device |
US9749676B2 (en) * | 2010-06-08 | 2017-08-29 | Microsoft Technology Licensing, Llc | Virtual playback speed modification |
JP2012134919A (ja) | 2010-12-24 | 2012-07-12 | Panasonic Corp | 補聴器 |
JP2013114723A (ja) | 2011-11-30 | 2013-06-10 | Sony Corp | 情報処理装置、プログラムおよび情報処理方法 |
US20150024348A1 (en) * | 2013-07-19 | 2015-01-22 | Starkey Laboratories, Inc. | System to visually display and demonstrate hearing assistance device features |
KR102172149B1 (ko) * | 2013-12-03 | 2020-11-02 | 주식회사 케이티 | 컨텐츠 재생 방법, 대사 구간 데이터 제공 방법 및 동영상 컨텐츠 재생 단말 |
US9380374B2 (en) * | 2014-01-17 | 2016-06-28 | Okappi, Inc. | Hearing assistance systems configured to detect and provide protection to the user from harmful conditions |
US9496000B2 (en) * | 2014-05-16 | 2016-11-15 | Comcast Cable Communications, Llc | Audio modification for adjustable playback rate |
KR102224568B1 (ko) * | 2014-08-27 | 2021-03-08 | 삼성전자주식회사 | 오디오 데이터 처리 방법과 이를 지원하는 전자 장치 |
US10666995B2 (en) | 2015-10-19 | 2020-05-26 | Sony Corporation | Information processing apparatus, information processing system, and program |
-
2016
- 2016-08-25 US US15/767,525 patent/US10666995B2/en active Active
- 2016-08-25 WO PCT/JP2016/074784 patent/WO2017068858A1/ja active Application Filing
- 2016-08-25 EP EP16857176.8A patent/EP3367382A4/en not_active Withdrawn
- 2016-08-25 JP JP2017546443A patent/JP6904255B2/ja active Active
- 2016-08-25 CN CN201680054421.XA patent/CN108028055A/zh active Pending
-
2020
- 2020-03-27 US US16/832,388 patent/US11081136B2/en active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5717818A (en) * | 1992-08-18 | 1998-02-10 | Hitachi, Ltd. | Audio signal storing apparatus having a function for converting speech speed |
JPH06259884A (ja) * | 1993-03-08 | 1994-09-16 | Sanyo Electric Co Ltd | 磁気再生装置 |
JP2006203900A (ja) * | 2002-07-16 | 2006-08-03 | Advanced Media Inc | 音声認識サーバ及び音声認識システム |
JP2004205578A (ja) * | 2002-12-24 | 2004-07-22 | Toshiba Corp | 音声信号を無線通信する音声再生機器及び音声再生機器の消費電力制御方法 |
JP2005165183A (ja) * | 2003-12-05 | 2005-06-23 | Matsushita Electric Ind Co Ltd | 無線通信装置 |
CN1925698A (zh) * | 2005-08-31 | 2007-03-07 | 索尼株式会社 | 音频信号处理装置、音频信号处理方法、程序和输入装置 |
CN101071616A (zh) * | 2006-05-12 | 2007-11-14 | 索尼株式会社 | 信息处理系统、终端设备、信息处理方法及程序 |
US20110038496A1 (en) * | 2009-08-17 | 2011-02-17 | Spear Labs, Llc | Hearing enhancement system and components thereof |
CN104303228A (zh) * | 2012-05-10 | 2015-01-21 | 美国思睿逻辑有限公司 | 在噪音消除个人音频设备中误差信号含量控制的次级和泄漏路径模型的调适 |
JP2015139083A (ja) * | 2014-01-22 | 2015-07-30 | 日東電工株式会社 | 聴覚補完システム及び聴覚補完方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111492673A (zh) * | 2018-06-08 | 2020-08-04 | 西万拓私人有限公司 | 用于传输用于听力设备的听力匹配应用中的处理状态的方法 |
CN111492673B (zh) * | 2018-06-08 | 2022-02-11 | 西万拓私人有限公司 | 用于传输处理状态的方法和听力匹配应用系统 |
Also Published As
Publication number | Publication date |
---|---|
EP3367382A1 (en) | 2018-08-29 |
JP6904255B2 (ja) | 2021-07-14 |
US20200228849A1 (en) | 2020-07-16 |
US11081136B2 (en) | 2021-08-03 |
JPWO2017068858A1 (ja) | 2018-08-02 |
US20180293970A1 (en) | 2018-10-11 |
EP3367382A4 (en) | 2019-07-10 |
WO2017068858A1 (ja) | 2017-04-27 |
US10666995B2 (en) | 2020-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105872253B (zh) | 一种直播声音处理方法及移动终端 | |
JP6113302B2 (ja) | 音声データの伝送方法及び装置 | |
US10180981B2 (en) | Synchronous audio playback method, apparatus and system | |
CN100464578C (zh) | 用于以高质量的可变速度播放视听媒体的系统和方法 | |
WO2021176842A1 (ja) | 復号装置、復号方法、プログラム、符号化装置、符号化方法 | |
JP2006317972A (ja) | オーディオデータ編集方法とこれを適用した記録媒体及びデジタルオーディオプレーヤー | |
US20240030936A1 (en) | Decoding apparatus, decoding method, and program | |
CN104835520A (zh) | 一种在移动设备上录音的方法及装置 | |
US20230419795A1 (en) | Encoding apparatus, encoding method, decoding apparatus, decoding method, transmission system, receiving apparatus, and program | |
CN104364842A (zh) | 立体声音频信号编码器 | |
JP2011198348A (ja) | 録音装置 | |
KR20190005103A (ko) | 전자기기의 웨이크업 방법, 장치, 디바이스 및 컴퓨터 가독 기억매체 | |
CN105704598A (zh) | 一种歌唱耳机 | |
US11081136B2 (en) | Information processing apparatus, information processing system, and program | |
EP2917915B1 (en) | Multi-resolution audio signals | |
CN109360588B (zh) | 一种基于移动设备的音频处理方法及装置 | |
WO2020149227A1 (ja) | 復号装置、復号方法、及びプログラム | |
US20230145547A1 (en) | Decoding device, decoding method, program, encoding device, and encoding method | |
JP2009075280A (ja) | コンテンツ再生装置 | |
CN115497485B (zh) | 三维音频信号编码方法、装置、编码器和系统 | |
CN110289010B (zh) | 一种声音采集的方法、装置、设备和计算机存储介质 | |
JPWO2007145079A1 (ja) | 反復再生学習機およびプログラム | |
WO2018105254A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
CN116320864A (zh) | 一种基于内部音频响度的耳机音量自适应调整方法 | |
Krejcar et al. | Application for Conversion of Audio Signal to MP3 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20180511 |