CN108683972B - 声音处理系统 - Google Patents

声音处理系统 Download PDF

Info

Publication number
CN108683972B
CN108683972B CN201810681854.9A CN201810681854A CN108683972B CN 108683972 B CN108683972 B CN 108683972B CN 201810681854 A CN201810681854 A CN 201810681854A CN 108683972 B CN108683972 B CN 108683972B
Authority
CN
China
Prior art keywords
sound
user
unit
processing system
neck
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810681854.9A
Other languages
English (en)
Other versions
CN108683972A (zh
Inventor
关矢俊之
森秀人
羽生田诚
东崎优
平野雄哉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN108683972A publication Critical patent/CN108683972A/zh
Application granted granted Critical
Publication of CN108683972B publication Critical patent/CN108683972B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/20—Speech recognition techniques specially adapted for robustness in adverse environments, e.g. in noise, of stress induced speech
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M9/00—Arrangements for interconnection not involving centralised switching
    • H04M9/08—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
    • H04M9/082—Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1008—Earpieces of the supra-aural or circum-aural type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/02—Details casings, cabinets or mounting therein for transducers covered by H04R1/02 but not provided for in any of its subgroups
    • H04R2201/023—Transducers incorporated in garment, rucksacks or the like
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/20—Processing of the output signals of the acoustic transducers of an array for obtaining a desired directivity characteristic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/11—Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Otolaryngology (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Quality & Reliability (AREA)
  • General Health & Medical Sciences (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • User Interface Of Digital Computer (AREA)
  • Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)

Abstract

本申请提供一种声音处理系统。该声音处理系统包括：颈带型佩戴部，在颈带型佩戴部佩戴于用户的情况下，被配置为定形为围绕用户的颈部从颈部的左侧和右侧到颈部的后侧转弯；第一声音获取部，被配置为设置在颈带型佩戴部上；以及第二声音获取部，被配置为与颈带型佩戴部上的第一声音获取部不同，其中，第一声音获取部的位置比第二声音获取部的位置更接近用户的嘴，第二声音获取部的位置比第一声音获取部的位置设置在用户的直立姿势下的更下侧或前侧，第二声音获取部的方向与第一声音获取部的方向不同。

Description

声音处理系统
本发明申请是申请日为2015年9月23日、发明名称为“声音处理系统”的第201510612564.5号发明专利申请的分案申请。
技术领域
本公开内容涉及声音处理系统。
背景技术
近年来，佩戴于用户身体的任意部位，来感测用户状态，或对周围的情况进行拍摄或者录音等，或将多种信息向用户输出的可穿戴设备不断普及。例如，可穿戴设备被利用于生活日志的领域、运动辅助的领域等多种领域。
可穿戴设备所取得的信息会较大地受到佩戴部位、用户状态、周围环境的影响。例如，对于声音，从用户的嘴部发出的声音(以下，也称为“用户声音”)有时会淹没于可穿戴设备与衣服的摩擦声、振动的声音、周围环境声等杂音。因此，寻求用于更鲜明地取得用户声音的技术。
例如，在下述专利文献1中，公开了取得如下声音信号的技术，该声音信号是通过在头带式耳机(headset)中设置两个麦克风，对从各麦克风输入的声音信号进行麦克风陈列处理来抑制杂音而增强了用户声音的信号。
专利文献1：日本特开2005-303574号公报
但是，在本技术领域中，希望性能进一步提高。
发明内容
因此，在本公开内容中，提出了一种能够更鲜明地取得用户声音的新改进的声音处理系统。
根据本公开内容，提供了一种声音处理系统，具备佩戴于用户的佩戴部，上述佩戴部具有至少三个声音取得部，上述声音取得部取得用于波束成形的声音数据。
根据本申请的一个方面，提供了一种声音处理系统，包括：颈带型佩戴部，在颈带型佩戴部佩戴于用户的情况下，被配置为定形为围绕用户的颈部从颈部的左侧和右侧到颈部的后侧转弯；第一声音获取部，被配置为设置在颈带型佩戴部上；以及第二声音获取部，被配置为与颈带型佩戴部上的第一声音获取部不同，其中，第一声音获取部的位置比第二声音获取部的位置更接近用户的嘴，第二声音获取部的位置比第一声音获取部的位置设置在用户的直立姿势下的更下侧或前侧，第二声音获取部的方向与第一声音获取部的方向不同。
如以上说明那样，根据本公开内容，能够更鲜明地取得用户声音。
应予说明，上述效果不被限定，也可以与上述效果一起、或者代替上述效果，发挥本说明书所示的任意效果、或者能够从本说明书中把握的其他效果。
附图说明
图1是表示本实施方式的声音处理系统的外观结构的一个例子的图。
图2是表示本实施方式的声音处理系统的外观结构的一个例子的图。
图3是表示本实施方式的声音处理系统的外观结构的一个例子的图。
图4是表示本实施方式的声音处理系统的外观结构的其他一个例子的图。
图5是表示本实施方式的声音处理系统的外观结构的其他一个例子的图。
图6是表示比较例的声音处理系统的外观结构的一个例子的图。
图7是用于对本实施方式的声音取得部的配置方针进行说明的图。
图8是用于对本实施方式的声音取得部的配置方针进行说明的图。
图9是用于对本实施方式的声音取得部的配置方针进行说明的图。
图10是用于对本实施方式的声音取得部的配置方针进行说明的图。
图11是表示本实施方式的声音处理系统的内部结构的一个例子的框图。
图12是表示本实施方式的声音处理系统中执行的声音信号处理的流程的一个例子的流程图。
附图标记说明：
1…声音处理系统；110…声音取得部；120…拍摄部；130…操作部；140…传感器部；150…通信部；160…控制部。
具体实施方式
以下，一边参照附图，一边对本公开内容的优选实施方式详细地进行说明。应予说明，在本说明书以及附图中，通过对于实际上具有相同的功能结构的构成要素标注相同的附图标记而省略重复说明。
另外，在本说明书以及附图中，对于实际上具有相同功能结构的要素，有时还在标注了相同的附图标记后标注不同的字母来进行区别。例如，对于实际上具有相同的功能结构的多个要素，根据需要以声音取得部110A、110B以及110C的方式进行区别。其中，在无需对于实际上具有相同的功能结构的多个要素分别特别进行区别的情况下，仅标注相同附图标记。例如，在无需对于声音取得部110A、110B以及110C特别进行区别的情况下，简称为声音取得部110。
应予说明，说明按以下的顺序来进行。
1.外观结构
2.声音取得部的配置
2-1.配置方针
2-2.实际的配置例
3.内部结构
4.动作处理
5.总结
<1.外观结构>
首先，参照图1～图6，对本公开内容的一个实施方式的声音处理系统的外观结构进行说明。
图1～图3是表示本实施方式的声音处理系统的外观结构的一个例子的图。如图1～图3所示，本实施方式的声音处理系统1具有从颈部两侧至后侧(后背侧)环绕半周之类的形状的佩戴单元(佩戴部)。而且，佩戴单元通过悬挂于用户颈部而佩戴于用户。应予说明，图1～图3表示从各个视角观察用户佩戴了佩戴单元的状态的图，具体而言，图1是立体图，图2是从用户右侧观察的侧视图，图3是从用户上侧观察的俯视图。
应予说明，在本说明书中，虽使用上下左右前后这样表示方向的术语，但这些方向表示后述的图8所示的用户的直立姿势下从用户身体的中心(例如胸口的位置)观察的方向。例如，“右”表示用户的右半身侧的方向，“左”表示用户的左半身侧的方向，“上”表示用户头侧的方向，“下”表示用户脚侧的方向。另外，“前”表示用户身体所面向的方向，“后”表示用户后背侧的方向。
如图1～图3所示，本实施方式的佩戴单元可以为绕用户颈部佩戴的颈部悬挂型。佩戴单元可以与用户颈部紧贴地佩戴，也可以分离地佩戴。作为颈部悬挂型的佩戴单元的其他形状，例如可以考虑利用颈下束带佩戴于用户的垂饰型、代替悬挂于头的头带而具有通过颈部后侧的颈带的头带式耳机型。
佩戴型单元的使用方式可以为直接佩戴于人体地使用的方式。直接佩戴地使用的方式是指以在佩戴型单元与人体之间不存在任何物体的状态进行使用的方式。例如，图1～图3所示的佩戴单元以与用户的颈部的肌肤接触的方式进行佩戴的情况属于本方式。除此之外，可以考虑直接佩戴于头部的头带式耳机型、眼镜型等多种方式。
佩戴型单元的使用方式也可以为间接佩戴于人体地进行使用的方式。间接佩戴地进行使用的方式是指以在佩戴型单元与人体之间存在某种物体的状态进行使用的方式。例如，图1～图3所示的佩戴单元以隐藏于衬衫的衣领下方的方式进行佩戴等以从衣服上方与用户接触的方式进行佩戴的情况属于本方式。除此之外，可以考虑利用颈下束带佩戴于用户的垂饰型、利用扣件等扣住衣服的饰针型等多种方式。
如图1～图3所示，佩戴单元具有多个声音取得部110(110A、110B、110C以及110D)。声音取得部110取得用户声音、用户的谈话对象发出的声音、或者周围环境声等声音数据。由声音取得部110取得的声音数据成为使用户声音鲜明、使用户的谈话对象发出的声音鲜明、抑制其他杂音的波束成形处理的对象。如图1～图3所示，在声音取得部以不与用户直接接触的方式设置于未面向用户侧的部分(例如，与接触于用户的面相反的一侧的面)的情况下，能够降低由于颈部与佩戴单元之间的摩擦而产生杂音的影响。应予说明，在图1～图3中示出了在佩戴单元设置有四个声音取得部110的结构，但本技术并不限定于上述例子。例如，佩戴单元可以具有至少三个声音取得部，也可以具有五个以上声音取得部。
本实施方式的声音处理系统1可以作为佩戴单元单体而实现，也可以作为多个装置的组合而实现。例如，声音处理系统1可以作为图1～图3所示的颈部悬挂型的佩戴单元以及佩戴于手腕的腕带型的佩戴单元的组合而实现。而且，声音处理系统1也可以使用由设置于多个装置的多个声音取得部取得的声音数据来进行波束成形处理。应予说明，以下，对声音处理系统1为作为图1～图3所示的佩戴单元单体而实现的情况进行说明。
佩戴单元的其他例子如图4以及图5所示。图4以及图5是表示本实施方式的声音处理系统的外观结构的其他一个例子的图。图4表示由眼镜型的佩戴单元单体构成的声音处理系统1的外观结构。图5表示由颈带型的佩戴单元单体构成的声音处理系统1的外观结构。在图4以及图5所示的例子中，与图1～图3所示的例子同样，声音处理系统1也具有多个声音取得部110(110A、110B、110C以及110D)。
此处，参照图6对比较例进行说明。图6是表示比较例的声音处理系统的外观结构的一个例子的图。图6的左图以及右图表示所谓的蓝牙(注册商标)头带式耳机的外观结构例。在图6的左图所示的例子中，比较例的声音处理系统具有两个声音取得部910(910A以及910B)，并通过悬挂于用户右耳而佩戴于用户。在图6的右图所示的例子中，比较例的声音处理系统具有左右对称地设置于与左右耳机连结的线缆的两个声音取得部910(910C以及910D)。这样，在图6的左图以及右图所示的例子中，均具有两个声音取得部。
此处，在可穿戴设备中，存在使用时麦克风与用户的嘴部的距离较远的情况，有时用户声音淹没于杂音。即便进行使用了由比较例那样的两个声音取得部取得的声音数据的波束成形处理，也难以解决这种问题。
因此，在本实施方式中，提出在通过波束成形处理进行杂音抑制的情况下提高杂音抑制性能的声音取得部110的配置。
<2.声音取得部的配置>
[2-1.配置方针]
首先，参照图7～图10对声音取得部110的配置方针进行说明。
图7是用于对本实施方式的声音取得部110的配置方针进行说明的图。如图7的左图所示，将相对于目标声音到来的方向210直线地配置声音取得部110作为第1配置方针。另外，如图7的左图所示，将相对于欲抑制的杂音到来的方向220直线地配置声音取得部110作为第2配置方针。在本实施方式中，能够相对于作为目标声音的用户声音到来的方向亦即用户的嘴部的方向210，直线地配置声音取得部110A以及110B。根据第1第2配置方针以及第2配置方针，能够高效地抑制从相反方向220到来的杂音成分。其原因在于：从用户的嘴部的方向210到来的用户声音到达声音取得部110A以及110B为止的相位差(时间差)较大，并且从相反方向220到来的声音到达声音取得部110B以及110A为止的相位差也较大。如图7的右图所示的极性图案所示，通过基于后述的控制部160进行的波束成形处理，来增强从用户的嘴部的方向210到来的用户声音，并且抑制从相反方向220A、220B以及220C到来的杂音成分。
接下来，参照图8，对与欲抑制的杂音到来的方向有关的声音取得部110的配置方针详细地进行说明。
图8是用于对本实施方式的声音取得部110的配置方针进行说明的图。如图8所示，在本实施方式中，将相对于下方向直线地配置声音取得部110A以及110B作为第3配置方针。若假定在屋外使用声音处理系统1，则在屋外产生的杂音多如图8所示地以用户的嘴部为基准从地面的方向(下方向)或者水平方向到来。应予说明，从地面的方向到来的杂音也称为地面噪声。根据本配置方针，由于相对于地面噪声到来的下方向直线地配置有声音取得部110，所以能够通过波束成形处理高效地抑制地面噪声。另外，根据本配置方针，从下方向与水平方向的中间倾斜方向到来的杂音也存在到达声音取得部110B以及110A为止的相位差，因此能够通过波束成形处理抑制杂音。这样，根据本配置方针，能够高效地抑制屋外环境中的杂音。应予说明，对于直升机的螺旋桨声音、来自设置于头上的液晶显示器的声音等，也会存在难以进行抑制的情况。当然，根据佩戴单元的形状，声音取得部110A以及110B也可以不严格地向下方向(竖直方向)直线地进行配置，也可以倾斜地进行配置。
接下来，参照图9以及图10，对设置有四个以上声音取得部110的情况下的配置方针详细地进行说明。
图9是用于对本实施方式的声音取得部110的配置方针进行说明的图。如图9的左图所示，在本实施方式中，将立体地配置多个声音取得部110作为第4配置方针。详细而言，将设置有四个声音取得部110的位置彼此连结而形成的形状为立体。应予说明，立体也可以把握为在包含任意三个声音取得部110的位置在内的平面上不存在剩余一个声音取得部110。在这样立体地进行配置的情况下，无论是从哪一方向到来的声音，由任意两个以上的声音取得部110取得的声音数据均会产生相位差，因此能够抑制从全部方向到来的杂音。另外，如图9的左图所示，将设置有四个声音取得部110的位置彼此连结而形成的形状为正四面体。将设置有多个声音取得部110的位置彼此连结而形成的形状优选为从各声音取得部110至用户的嘴部的距离形等间隔的正四面体之类的正多面体。当然，如图9的右图所示，根据佩戴单元的形状，将设置有四个声音取得部110的位置连结而形成的形状也可以是不为正四面体的四面体。
图10是用于对本实施方式的声音取得部110的配置方针进行说明的图。如图10所示，在本实施方式中，将使至少其中一个声音取得部110靠近用户的嘴部作为第5配置方针。根据本配置方针，至少一个声音取得部110能够以比其他杂音大的音量取得用户声音。由此，能够进一步增大基于波束成形处理的对用户声音的增强效果。例如图10所示，可以在比形成四面体的四个声音取得部110靠近用户的嘴部的位置设置有第五个声音取得部110E。除此之外，也可以例如图9的右图所示，将位于四面体顶点的声音取得部110中的其中一个(在图9的右图所示的例子中为声音取得部110A)设置于相比其他声音取得部靠近用户的嘴部的位置。
以上，对声音取得部110的配置方针进行了说明。
[2-2.实际的配置例]
接着，再次一边参照图1～图3，一边对遵照了上述配置方针的声音取得部110的实际的配置例进行说明。应予说明，由于佩戴单元的形状、各部件的重量等制约条件，声音取得部110的实际的配置也可以不必完全遵照上述配置方针。
首先，对第1配置方针进行说明。如图2所示，在佩戴单元佩戴于用户的状态下，声音取得部110A以及声音取得部110B在从用户的嘴部观察时配置于相同方向。另外，在佩戴单元佩戴于用户的状态下，将四个声音取得部110所包含的声音取得部110A(第1声音取得部)与用户的嘴部的距离、与四个声音取得部110所包含的声音取得部110B(第2声音取得部)与用户的嘴部的距离设置为不同。这样，在图1～图3所示的例子中，由于相对于目标声音到来的用户的嘴部的方向直线地配置有声音取得部110A以及110B，所以能够通过波束成形处理高效地增强用户声音。
接下来，对第2配置方针以及第3配置方针进行说明。如图2所示，在佩戴单元佩戴于用户的状态下，声音取得部110A以及声音取得部110B在从用户的嘴部观察时配置于相同方向。另外，在佩戴单元佩戴于用户的状态下，声音取得部110A(第1声音取得部)以及声音取得部110B(第2声音取得部)设置于用户直立姿势下相比用户的嘴部靠脚侧的位置。这样，在图1～图3所示的例子中，由于相对于欲抑制的杂音所到来的地面方向直线地配置有声音取得部110A以及110B，所以能够通过波束成形处理高效地抑制杂音。
接下来，对第4配置方针进行说明。如图1～图3所示，将设置有声音取得部110A、110B、110C、以及110D的位置彼此连结而形成的形状为立体。这样，在图1～图3所示的例子中，由于将多个声音取得部110立体地配置，所以能够通过波束成形处理抑制从全部方向到来的杂音。
接下来，对第5配置方针进行说明。如图1～图3所示，在佩戴单元佩戴于用户的状态下，声音取得部110A(第1声音取得部)设置于比其他声音取得部最靠近用户的嘴部的位置。这样，在图1～图3所示的例子中，由于声音取得部110A设置于靠近用户嘴部的位置，所以能够以比其他杂音大的音量取得用户声音。另外，对于第2以及第3配置条件而言，在佩戴单元佩戴于用户的状态下，声音取得部110B(第2声音取得部)设置于用户直立姿势下相比设置于最靠近用户的嘴部位置的声音取得部110A(第1声音取得部)靠用户脚侧的位置。由此，在图1～图3所示的例子中，能够兼顾用户声音的增强效果与杂音的抑制效果。应予说明，在图1～图3所示的例子中，声音取得部110A也设置于相比用户嘴部靠下侧的位置，但声音取得部110A也可以设置于相比嘴部更靠上侧的位置。
以上，对本实施方式的声音处理系统1中的声音取得部110的配置进行了说明。接着，参照图11对本实施方式的声音处理系统1的内部结构进行说明。
<3.内部结构>
图11是表示本实施方式的声音处理系统1的内部结构的一个例子的框图。如图11所示，声音处理系统1具有声音取得部110A～110D、拍摄部120、操作部130、传感器部140、通信部150、以及控制部160。
(1)声音取得部110
声音取得部110具有取得用于波束成形的声音数据的功能。例如，声音取得部110取得佩戴有声音处理系统1(佩戴单元)的用户所产生的用户声音、或者周围的声音。例如，声音取得部110由麦克风实现。声音取得部110可以设置于一个佩戴单元，可以设置于与佩戴单元不同的装置，也可以分散地设置于多个装置。例如，除了图1～图3所示的颈部悬挂型的佩戴单元之外，也可以在腕带型的佩戴单元、眼镜型的佩戴单元、以及智能手机设置声音取得部110。
声音取得部110也可以不为有指向性的麦克风。例如，声音取得部110也可以为在全方位具有灵敏度的麦克风。在全方位具有灵敏度是指极性图案中不存在不灵敏的区域(方位)。这种麦克风也可以称为半指向性的麦克风。并且，声音取得部110也可以为灵敏度在全方位一样或者大致一样的麦克风。灵敏度在全方位一样或者大致一样是指极性图案中灵敏度可以为圆形，但未必一定为完全圆形。换句话说，声音取得部110也可以为无指向性的麦克风。
声音取得部110也可以具有对由麦克风获得的声音信号进行放大处理的麦克风放大电路、A/D转换器。声音取得部110将所取得的声音数据向控制部160输出。
(2)拍摄部120
拍摄部120具有：由拍摄透镜、光阑、变焦透镜、以及聚焦透镜等构成的透镜系统；相对于透镜系统进行聚焦动作、变焦动作的驱动系统；以及对由透镜系统获得的拍摄光进行光电转换而生成拍摄信号的固态拍摄元件陈列等。固态拍摄元件陈列例如可以由电耦合元件(CCD：Charge Coupled Device)传感器陈列、互补金属氧化物半导体(CMOS：Complementary Metal Oxide Semiconductor)传感器陈列实现。例如，拍摄部120可以被设置为在声音处理系统1(佩戴单元)佩戴于用户的状态下能够拍摄用户的前方。在该情况下，拍摄部120例如能够拍摄用户的谈话对象。另外，拍摄部120也可以被设置为在声音处理系统1佩戴于用户的状态下拍摄用户的面孔。在该情况下，声音处理系统1能够根据拍摄图像来确定用户嘴部的位置。拍摄部120将作为数字信号的拍摄图像的数据向控制部160输出。
(3)操作部130
操作部130被用户操作，具有接受来自用户的输入的功能。例如，操作部130可以作为照相机按钮而实现，接受指示拍摄部120拍摄静止图像的输入、指示拍摄部120开始或者停止拍摄动态图像的输入。另外，操作部130也可以作为声音输入按钮而实现，接受指示声音取得部110开始或者停止声音输入的输入。另外，操作部130也可以作为触摸滑块而实现，接受触摸操作、滑动操作。另外，操作部130也可以作为电源按钮而实现，接受指示声音处理系统1开启或者关闭电源的操作。操作部130将表示用户输入的信息向控制部160输出。
(4)传感器部140
传感器部140具有对佩戴有声音处理系统1的用户的状态或者周围的状态进行感测的功能。例如，传感器部140可以具有加速度传感器、速度传感器、陀螺仪传感器、地磁传感器、全球定位系统(GPS：Global Positioning System)模块或者振动传感器中的至少一个。传感器部140可以设置于与佩戴单元不同的装置，也可以分散地设置于多个装置。例如，也可以在腕带型的装置设置脉搏传感器，在智能手机设置振动传感器。传感器部140将表示感测结果的信息向控制部160输出。
(5)通信部150
通信部150是用于通过有线/无线在声音处理系统1与其他装置之间进行数据收发的通信模块。通信部150例如通过有线局域网(LAN：Local Area Network)、无线局域网、无线网(Wi-Fi：Wireless Fidelity、注册商标)、红外线通信、蓝牙、近距离无线通讯技术(NFC：Near field communication)等方式与外部设备直接或者经由网络接入点进行无线通信。
例如，在智能手机或者云服务器等其他装置包含后述的作为控制部160的功能的情况下，通信部150可以发送利用声音取得部110、拍摄部120、操作部130、传感器部140取得的数据。在该情况下，利用其他装置进行波束成形处理、声音识别处理等。除此之外，例如在声音取得部110、拍摄部120、操作部130或者传感器部140设置于其他位置的装置的情况下，通信部150也可以接收由上述各部取得的数据并将其向控制部160输出。另外，通信部150也可以将基于控制部160进行的波束成形处理后的声音数据向用于存储该声音数据的存储装置发送。
(6)控制部160
控制部160作为运算处理装置以及控制装置发挥功能，并根据各种程序控制声音处理系统1内的全部动作。控制部160例如由中央处理器(CPU：Central Processing Unit)、微处理器等电子电路实现。应予说明，控制部160也可以包括存储所使用的程序、运算参数等的只读存储器(ROM：Read Only Memory)、以及临时存储适当变化的参数等的RAM(RandomAccess Memory)。
例如，控制部160使用由声音取得部110取得的多个声音数据，来进行形成用于取得来自用户嘴部的方向的声音的指向性的波束成形处理。波束成形处理是按照声音到来的各个区域分别使增强的程度变化的处理。具体而言，控制部160所进行的波束成形处理可以包括抑制从特定的区域到来的声音的处理，也可以包括增强来自所希望的方位的声音的处理。例如，控制部160也可以将来自用户嘴部的方向以外的方向的声音作为杂音进行抑制。另外，控制部160也可以增强来自用户嘴部的方向的声音。如上所述，声音取得部110本身也可以具有指向性。控制部160通过进行以由各声音取得部110取得的声音数据为对象的波束成形处理，来控制指向性。控制部160能够使用由各声音取得部110取得的声音数据间的相位差，来进行波束成形处理。
控制部160能够以多种视角控制波束成形处理。例如，控制部160能够以作为一个例子在以下进行说明的视角，来控制形成指向性的方向以及/或者范围。
例如，控制部160也可以基于杂音产生源与声音取得部110的位置关系来控制波束成形处理。例如上述那样，由于地面噪声的产生源为地面，所以控制部160也可以以抑制来自地面方向的声音的方式，控制波束成形处理。另外，例如在能够根据位置信息辨别出在特定方向存在交通量多的道路、线路等的情况下，控制部160也可以以抑制来自该方向的声音的方式，控制波束成形处理。除此之外，例如在存在指定杂音产生源的位置的用户指示的情况下，控制部160也可以以抑制来自用户指示所表示的位置的声音的方式，控制波束成形处理。
例如，控制部160也可以基于用户以外的说话人的位置来控制波束成形处理。例如，控制部160也可以进行增强来自用户以外的其他说话人的声音的波束成形处理。另外，控制部160也可以进行抑制来自用户以外的其他说话人的声音的波束成形处理。可以考虑多种确定用户以外的其他说话人的存在或者位置(方向)的方法。例如，控制部160也可以形成为若在从用户以外的方向取得了说话声的情况下判定为存在其他说话人则对方向进行确定。另外，控制部160也可以在通过声音识别而识别出取得了其他说话人的说话声的情况下判定为存在其他说话人。另外，控制部160也可以根据由拍摄部120拍摄出的拍摄图像的图像识别结果来确定其他说话人的存在以及位置。另外，控制部160也可以通过对由传感器部140所具有的全球定位系统模块取得的用户的位置信息、与其他说话人的位置信息进行比较，来确定其他说话人的存在以及位置。另外，控制部160也可以通过对从其他说话人所持的装置发出的电波的电波强度(例如，无线网的电波强度)进行测定，来确定其他说话人的存在以及位置。
例如，控制部160也可以基于表示用户状态的信息来控制波束成形处理。用户状态例如可以指用户跑、走、或者乘坐交通工具等运动状态。例如，控制部160能够根据由传感器部140取得的感测结果来推断用户的运动状态。控制部160也可以通过组合多个感测结果来推断详细的运动状态。例如，控制部160也可以通过组合基于振动传感器以及速度传感器的感测结果而将振动等级以及速度比步行时大的情况推断为乘坐汽车。除此之外，控制部160也可以将与乘坐汽车的情况相比振动等级小且速度大的情况判断为乘坐汽车。而且，控制部160也可以根据所推断的用户的运动状态，来放大或者缩小所形成的指向性的范围。例如，控制部160也可以在运动状态所表示的运动的强度(例如，从各传感器输出的数值)相对较大的情况下相比较小的情况，放大指向性的范围。应予说明，放大或者缩小指向性的范围这也可以把握为针对到来的声音放大或者缩小表示规定值以上的灵敏度的区域范围。除此之外，用户的状态也可以指用户面孔的朝向、姿势等用户姿势。例如，控制部160也可以根据由拍摄部120拍摄出的拍摄图像的图像识别结果等来推断用户面孔的朝向，并根据朝向控制指向性的朝向。在该情况下，在面孔的朝向改变，从而用户嘴部与声音取得部110的位置关系发生变化的情况下，控制部160能够以鲜明地取得从用户嘴部产生的声音的方式控制指向性。
另外，控制部160也可以进行与基于进行了波束成形处理的声音数据而执行的声音识别的结果对应的处理。声音识别处理可以利用控制部160执行，也可以利用云服务器等其他装置执行。例如，控制部160也可以基于声音识别的结果来控制声音处理系统1的动作。具体而言，控制部160也可以基于声音识别的结果来控制波束成形处理的指向性。由此，用户例如能够以使指向性朝向欲记录的声音的方向的方式利用声音进行指示。除此之外，控制部160也可以基于声音识别的结果使照相机的拍摄开始或者停止、记录特定的感测结果。由此，用户例如能够以记录欲记录的风景、运动状态的方式利用声音进行指示。
应予说明，控制部160例如能够作为移动处理器而实现。如上所述，佩戴单元可以具有控制部160，智能手机或者云服务器等其他任意装置也可以具有控制部160。
(7)其他
除此之外，声音处理系统1可以具有多种构成要素。例如，声音处理系统1也可以具有电池。如图1～图3所示，由于佩戴单元可以具有弯曲的形状，所以电池优选为曲面状的曲面电池。另外，声音处理系统1也可以具有能够连接用于对电池充电的线缆的充电连接器。充电连接器也可以为兼具作为能够连接通信线缆的通信连接器的功能的充电通信连接器。另外，声音处理系统1也可以具有作为针对用户的输出装置发挥功能的振荡器。另外，声音处理系统1也可以具有作为针对用户的输出装置发挥功能的扬声器。另外，声音处理系统1也可以具有能够连接作为针对用户的输出装置发挥功能的耳机的耳机连接器。耳机连接器可以具有磁力，也可以能够通过磁力对耳机连接器与耳机进行拆装。另外，声音处理系统1也可以具有用于对基于控制部160进行的波束成形处理后的声音数据进行存储的存储部。
以上，对本实施方式的声音处理系统1的内部结构进行了说明。接着，参照图12对本实施方式的声音处理系统1的动作处理进行说明。
<4.动作处理>
图12是表示本实施方式的声音处理系统1中执行的声音信号处理的流程的一个例子的流程图。
如图12所示，首先，在步骤S102中，声音处理系统1取得声音数据。例如，声音取得部110A、110B、110C以及110D分别取得声音数据并将其向控制部160输出。
接下来，在步骤S104中，声音处理系统1取得表示声源与声音取得部110的位置关系的信息。声源可以为杂音产生源，可以为用户声音的产生源亦即用户的嘴部，也可以为用户以外的说话人。控制部160取得表示上述声源与声音取得部110的位置关系、详细而言从声音取得部110观察的方向的信息。作为这种信息，可举出由声音取得部110取得的声音的声音识别结果、由拍摄部120拍摄出的拍摄图像的图像识别结果、由操作部130取得的表示用户输入的信息、基于传感器部140的感测结果、利用通信部150从其他装置取得的信息等。
接下来，在步骤S106中，声音处理系统1取得表示用户状态的信息。例如，控制部160取得表示用户的运动状态或者用户的姿势的信息。作为这种信息，可举出由声音取得部110取得的声音的声音识别结果、由拍摄部120拍摄出的拍摄图像的图像识别结果、由操作部130取得的表示用户输入的信息、基于传感器部140的感测结果、利用通信部150从其他装置取得的信息等。
而且，在步骤S108中，声音处理系统1进行波束成形处理。例如，控制部160进行使用上述步骤S102中取得的多个声音数据来形成用于取得来自用户嘴部的方向的声音的指向性的波束成形处理。此时，控制部160也可以基于杂音产生源与声音取得部110的位置关系而以抑制杂音的方式控制波束成形处理。另外，控制部160也可以进行基于用户以外的说话人的位置来增强或者抑制来自用户以外的其他说话人的声音的波束成形处理。另外，控制部160也可以根据用户状态来控制形成指向性的方向以及/或者范围。
之后，在步骤S110中，声音处理系统1进行声音识别处理。例如，控制部160基于进行了波束成形处理的声音数据来执行声音识别处理。而且，控制部160也可以根据声音识别结果来控制声音处理系统1的动作。
以上，对声音处理系统1中执行的声音信号处理的流程的一个例子进行了说明。
<5.总结>
以上，参照图1～图12对本公开的一个实施方式详细地进行了说明。如上述说明那样，本实施方式的声音处理系统1在佩戴单元具有至少三个声音取得部。由此，声音处理系统1能够取得适于进行使用户声音更鲜明的波束成形处理的声音数据。
以上，一边参照附图，一边对本公开的优选实施方式详细地进行了说明，但本公开内容的技术范围并不限定于上述例子。了解到只要是具有本公开内容的技术领域中的通常知识的人，显而易见能够在权利要求所记载的技术思想的范畴内想到各种变更例或者修正例，这当然属于本公开的技术范围。
应予说明，本说明书中说明的基于各装置进行的一系列处理可以使用软件、硬件以及软件与硬件的组合中的任一方式来实现。构成软件的程序例如预先储存于设置于各装置的内部或者外部的存储介质(非暂时性介质：non-transitory media)。而且，各程序例如在计算机执行时被读入内存，并利用中央处理器等处理器来执行。
另外，在本说明书中使用流程图以及序列图进行了说明的处理可以不必以图示的顺序来执行。几个处理步骤可以并列地执行。另外，可以采用追加的处理步骤，也可以省略一部分的处理步骤。
另外，本说明书所记载的效果只不过是说明或者例示而并不限定。换句话说，本公开内容的技术可以与上述效果一起、或者代替上述效果发挥本领域技术人员从本说明书的记载中明确出的其他效果。
应予说明，如下结构也属于本公开内容的技术范围。
(1)一种声音处理系统，具备佩戴于用户的佩戴部，上述佩戴部具有至少三个声音取得部，上述声音取得部取得用于波束成形的声音数据。
(2)根据上述(1)所记载的声音处理系统，上述佩戴部具有至少四个上述声音取得部，将设置有四个上述声音取得部的位置彼此连结而形成的形状是立体的。
(3)根据上述(1)或(2)所记载的声音处理系统，在上述佩戴部佩戴于上述用户的状态下，上述四个声音取得部所包含的第1声音取得部与上述用户的嘴部的距离、与上述四个声音取得部所包含的第2声音取得部与上述用户的嘴部的距离被设置为不同的距离。
(4)根据上述(3)所记载的声音处理系统，在上述佩戴部佩戴于上述用户的状态下，上述第1声音取得部设置于相比其他上述声音取得部最靠近上述用户的嘴部的位置，上述第2声音取得部设置于上述用户在直立姿势下相比上述第1声音取得部靠上述用户的脚侧的位置。
(5)根据上述(3)或(4)所记载的声音处理系统，上述第1声音取得部以及上述第2声音取得部设置于上述用户在直立姿势下相比上述用户的嘴部靠脚侧的位置。
(6)根据上述(2)～(5)中的任一项所记载的声音处理系统，上述声音取得部是在全方位具有灵敏度的麦克风。
(7)根据上述(6)所记载的声音处理系统，上述声音取得部是灵敏度在全方位一样或者大致一样的麦克风。
(8)根据上述(2)～(7)中任一项所记载的声音处理系统，上述声音处理系统还具备控制部，上述控制部使用由上述声音取得部取得的多个声音数据来进行波束成形处理，上述波束成形处理形成用于取得来自上述用户的嘴部的方向的声音的指向性。
(9)根据上述(8)所记载的声音处理系统，上述波束成形处理是按声音到来的各个区域分别使增强程度发生变化的处理。
(10)根据上述(9)所记载的声音处理系统，上述波束成形处理包括抑制从特定区域到来的声音的处理。
(11)根据上述(8)～(10)中任一项所记载的声音处理系统，上述控制部基于杂音产生源与上述声音取得部之间的位置关系来控制上述波束成形处理。
(12)根据上述(8)～(11)中任一项所记载的声音处理系统，上述控制部基于上述用户以外的说话人的位置来控制上述波束成形处理。
(13)根据上述(8)～(12)中任一项所记载的声音处理系统，上述控制部基于表示上述用户的状态的信息来控制上述波束成形处理。
(14)根据上述(8)～(13)中任一项所记载的声音处理系统，上述控制部进行与声音识别的结果对应的处理，上述声音识别的结果是基于进行了上述波束成形处理的声音数据而执行得到的。
(15)根据上述(14)所记载的声音处理系统，上述控制部基于上述声音识别的结果来控制上述声音处理系统的动作。
(16)根据上述(15)所记载的声音处理系统，上述控制部基于上述声音识别的结果来控制上述指向性。
(17)根据上述(8)～(16)中的任一项所记载的声音处理系统，上述佩戴部具有上述控制部。
(18)根据上述(2)～(17)中的任一项所记载的声音处理系统，上述佩戴部以绕上述用户的颈部佩戴。

Claims (4)

1.一种声音处理系统，包括：
颈带型佩戴部，由具有带有开口的弯曲形状的刚性材料形成，被配置为被佩戴于用户的颈部上，且定形为围绕所述用户的颈部从所述颈部的左侧和右侧到所述颈部的后侧转弯，其中，所述开口与所述颈部的前侧对齐；
第一声音获取部，被配置为设置在所述颈带型佩戴部上；
第二声音获取部，被配置为与所述颈带型佩戴部上的所述第一声音获取部不同；
第三声音获取部，被配置为设置在所述颈带型佩戴部上并且与所述第一声音获取部和所述第二声音获取部不同；以及
第四声音获取部，被配置为设置在所述颈带型佩戴部上并且与所述第一声音获取部、所述第二声音获取部和所述第三声音获取部不同，
其中，所述第一声音获取部的位置比所述第二声音获取部的位置更接近所述用户的嘴，
所述第二声音获取部的位置比所述第一声音获取部的位置设置在所述用户的直立姿势下的更下侧或前侧，
所述第二声音获取部的方向与所述第一声音获取部的方向不同，
其中，所述第一声音获取部、所述第二声音获取部、所述第三声音获取部和所述第四声音获取部的位置被连接以形成立体，
其中，所述声音处理系统还包括：
至少一个传感器，被配置为获取指示所述用户的运动状态的感测结果；以及
控制部，被配置为使用由所述第一声音获取部、所述第二声音获取部、所述第三声音获取部和所述第四声音获取部获得的多个声音数据来进行波束成形处理，以形成用于获取来自目标方向的声音的指向性，
其中，所述控制部根据从所述至少一个传感器获取的所述感测结果确定所述用户的运动状态，并根据所述用户的运动状态来控制所述波束成形处理，以及
其中，所述控制部根据所述用户的运动状态来放大或缩小所形成的指向性的范围，其中，与所述用户的运动状态表示运动强度较小的情况相比，在所述用户的运动状态表示的运动强度较大的情况下，所述控制部放大所形成的指向性的范围。
2.根据权利要求1所述的声音处理系统，还包括：
通信部，被配置为通过无线连接与其他装置通信或者向所述其他装置发送所述声音。
3.根据权利要求2所述的声音处理系统，其中，
所述通信部通过使用蓝牙来与所述其他装置通信。
4.根据权利要求1所述的声音处理系统，还包括：
输出部，被配置为将输出声音输出至耳机。
CN201810681854.9A 2014-10-20 2015-09-23 声音处理系统 Active CN108683972B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014-213496 2014-10-20
JP2014213496 2014-10-20
CN201510612564.5A CN105529033B (zh) 2014-10-20 2015-09-23 声音处理系统

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201510612564.5A Division CN105529033B (zh) 2014-10-20 2015-09-23 声音处理系统

Publications (2)

Publication Number Publication Date
CN108683972A CN108683972A (zh) 2018-10-19
CN108683972B true CN108683972B (zh) 2022-08-09

Family

ID=55760637

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201520742860.2U Active CN205508399U (zh) 2014-10-20 2015-09-23 声音处理系统
CN201810681854.9A Active CN108683972B (zh) 2014-10-20 2015-09-23 声音处理系统
CN201510612564.5A Active CN105529033B (zh) 2014-10-20 2015-09-23 声音处理系统

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201520742860.2U Active CN205508399U (zh) 2014-10-20 2015-09-23 声音处理系统

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201510612564.5A Active CN105529033B (zh) 2014-10-20 2015-09-23 声音处理系统

Country Status (5)

Country Link
US (3) US10306359B2 (zh)
EP (2) EP3211918B1 (zh)
JP (2) JP6503559B2 (zh)
CN (3) CN205508399U (zh)
WO (1) WO2016063587A1 (zh)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017027397A2 (en) * 2015-08-07 2017-02-16 Cirrus Logic International Semiconductor, Ltd. Event detection for playback management in an audio device
US10796805B2 (en) 2015-10-08 2020-10-06 Cordio Medical Ltd. Assessment of a pulmonary condition by speech analysis
JP2018007256A (ja) * 2016-07-04 2018-01-11 イーエム−テック・カンパニー・リミテッドＥＭ−ＴＥＣＨ．Ｃｏ．，Ｌｔｄ． オーディオフォーカシング機能を備える音声増幅装置
WO2018051663A1 (ja) * 2016-09-13 2018-03-22 ソニー株式会社 音源位置推定装置及びウェアラブルデバイス
EP3561642A4 (en) 2016-12-22 2019-12-25 Sony Corporation INFORMATION PROCESSING DEVICE AND METHOD FOR CONTROLLING THEM
JP1589838S (zh) * 2017-01-20 2017-11-06
WO2018207453A1 (ja) 2017-05-08 2018-11-15 ソニー株式会社 情報処理装置
US10869124B2 (en) 2017-05-23 2020-12-15 Sony Corporation Information processing apparatus, control method, and recording medium
JP6766086B2 (ja) 2017-09-28 2020-10-07 キヤノン株式会社 撮像装置およびその制御方法
US11642431B2 (en) 2017-12-08 2023-05-09 Sony Corporation Information processing apparatus, control method of the same, and recording medium
CN108235165B (zh) * 2017-12-13 2020-09-15 安克创新科技股份有限公司 一种麦克风颈环耳机
CN108235164B (zh) * 2017-12-13 2020-09-15 安克创新科技股份有限公司 一种麦克风颈环耳机
JP2019186630A (ja) 2018-04-03 2019-10-24 キヤノン株式会社 撮像装置及びその制御方法及びプログラム
WO2019246562A1 (en) 2018-06-21 2019-12-26 Magic Leap, Inc. Wearable system speech processing
US11172293B2 (en) * 2018-07-11 2021-11-09 Ambiq Micro, Inc. Power efficient context-based audio processing
US10847177B2 (en) * 2018-10-11 2020-11-24 Cordio Medical Ltd. Estimating lung volume by speech analysis
WO2020180719A1 (en) 2019-03-01 2020-09-10 Magic Leap, Inc. Determining input for speech processing engine
US11011188B2 (en) 2019-03-12 2021-05-18 Cordio Medical Ltd. Diagnostic techniques based on speech-sample alignment
US11024327B2 (en) 2019-03-12 2021-06-01 Cordio Medical Ltd. Diagnostic techniques based on speech models
JP7350092B2 (ja) * 2019-05-22 2023-09-25 ソロズ・テクノロジー・リミテッド 眼鏡デバイス、システム、装置、および方法のためのマイク配置
US11328740B2 (en) 2019-08-07 2022-05-10 Magic Leap, Inc. Voice onset detection
JP6719140B1 (ja) * 2019-11-15 2020-07-08 Ｆａｉｒｙ Ｄｅｖｉｃｅｓ株式会社 首掛け型装置
AU2020385740B2 (en) * 2019-11-20 2023-05-25 Daikin Industries, Ltd. Remote work support system
JP7408414B2 (ja) * 2020-01-27 2024-01-05 シャープ株式会社 ウェアラブルマイクスピーカ
US11484211B2 (en) 2020-03-03 2022-11-01 Cordio Medical Ltd. Diagnosis of medical conditions using voice recordings and auscultation
US11917384B2 (en) 2020-03-27 2024-02-27 Magic Leap, Inc. Method of waking a device using spoken voice commands
US11417342B2 (en) 2020-06-29 2022-08-16 Cordio Medical Ltd. Synthesizing patient-specific speech models
JP6786139B1 (ja) 2020-07-06 2020-11-18 Ｆａｉｒｙ Ｄｅｖｉｃｅｓ株式会社 音声入力装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102393520A (zh) * 2011-09-26 2012-03-28 哈尔滨工程大学 基于目标回波多普勒特性的声纳运动目标成像方法
CN103024629A (zh) * 2011-09-30 2013-04-03 斯凯普公司 处理信号
CN103135092A (zh) * 2013-02-05 2013-06-05 中国科学院上海微系统与信息技术研究所 一种微孔径声阵列运动目标定向方法
CN104105449A (zh) * 2011-12-01 2014-10-15 毛伊图像公司 使用基于声脉冲和多孔多普勒超声的运动检测

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0631835Y2 (ja) 1988-06-27 1994-08-22 株式会社オーディオテクニカ 咽喉マイクロホンの保持装置
US5793875A (en) * 1996-04-22 1998-08-11 Cardinal Sound Labs, Inc. Directional hearing system
US6091832A (en) * 1996-08-12 2000-07-18 Interval Research Corporation Wearable personal audio loop apparatus
JP2001095098A (ja) * 1999-09-27 2001-04-06 Harada Denshi Kogyo Kk 体感補聴器
US7099821B2 (en) * 2003-09-12 2006-08-29 Softmax, Inc. Separation of target acoustic signals in a multi-transducer arrangement
JP2005303574A (ja) 2004-04-09 2005-10-27 Toshiba Corp 音声認識ヘッドセット
CN101300897A (zh) * 2005-11-01 2008-11-05 皇家飞利浦电子股份有限公司 包括声音跟踪装置的助听器
US7522738B2 (en) * 2005-11-30 2009-04-21 Otologics, Llc Dual feedback control system for implantable hearing instrument
WO2007099908A1 (ja) 2006-02-27 2007-09-07 Matsushita Electric Industrial Co., Ltd. ウェアラブル端末、および、携帯撮像収音装置、およびそれらを実現する装置、方法、プログラム
SE530137C2 (sv) 2006-06-27 2008-03-11 Bo Franzen Headset med strupmikrofon i kombination med en mot hörselgången ljudtätande öronhögtalare
JP5401760B2 (ja) * 2007-02-05 2014-01-29 ソニー株式会社 ヘッドフォン装置、音声再生システム、音声再生方法
JP2009017083A (ja) * 2007-07-03 2009-01-22 Data Bank Commerce:Kk ノイズキャンセル装置
JP2010187218A (ja) * 2009-02-12 2010-08-26 Sony Corp 制御装置、制御方法及び制御プログラム
US8897455B2 (en) * 2010-02-18 2014-11-25 Qualcomm Incorporated Microphone array subset selection for robust noise reduction
JP6031041B2 (ja) 2010-11-24 2016-11-24 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． 複数のオーディオセンサを有する装置とその動作方法
WO2012083989A1 (en) * 2010-12-22 2012-06-28 Sony Ericsson Mobile Communications Ab Method of controlling audio recording and electronic device
JP2012133250A (ja) * 2010-12-24 2012-07-12 Sony Corp 音情報表示装置、音情報表示方法およびプログラム
US9711127B2 (en) 2011-09-19 2017-07-18 Bitwave Pte Ltd. Multi-sensor signal optimization for speech communication
JP5772448B2 (ja) * 2011-09-27 2015-09-02 富士ゼロックス株式会社 音声解析システムおよび音声解析装置
JP6031761B2 (ja) 2011-12-28 2016-11-24 富士ゼロックス株式会社 音声解析装置および音声解析システム
JP2013191996A (ja) 2012-03-13 2013-09-26 Seiko Epson Corp 音響装置
EP2736272A1 (en) 2012-11-22 2014-05-28 ETH Zurich Wearable microphone array apparatus
CN202998463U (zh) 2012-12-11 2013-06-12 启通科技有限公司 一种挂颈式助听器
RU2520184C1 (ru) * 2012-12-28 2014-06-20 Алексей Леонидович УШАКОВ Гарнитура для мобильного электронного устройства
US9525938B2 (en) * 2013-02-06 2016-12-20 Apple Inc. User voice location estimation for adjusting portable device beamforming settings
US10229697B2 (en) * 2013-03-12 2019-03-12 Google Technology Holdings LLC Apparatus and method for beamforming to obtain voice and noise signals
US9753311B2 (en) * 2013-03-13 2017-09-05 Kopin Corporation Eye glasses with microphone array
US9343053B2 (en) * 2013-05-13 2016-05-17 Sound In Motion Adding audio sound effects to movies
EP2840807A1 (en) * 2013-08-19 2015-02-25 Oticon A/s External microphone array and hearing aid using it

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102393520A (zh) * 2011-09-26 2012-03-28 哈尔滨工程大学 基于目标回波多普勒特性的声纳运动目标成像方法
CN103024629A (zh) * 2011-09-30 2013-04-03 斯凯普公司 处理信号
CN104105449A (zh) * 2011-12-01 2014-10-15 毛伊图像公司 使用基于声脉冲和多孔多普勒超声的运动检测
CN103135092A (zh) * 2013-02-05 2013-06-05 中国科学院上海微系统与信息技术研究所 一种微孔径声阵列运动目标定向方法

Also Published As

Publication number Publication date
CN105529033A (zh) 2016-04-27
JP2019134441A (ja) 2019-08-08
JPWO2016063587A1 (ja) 2017-08-03
CN108683972A (zh) 2018-10-19
EP3211918A1 (en) 2017-08-30
JP6503559B2 (ja) 2019-04-24
CN205508399U (zh) 2016-08-24
EP3211918A4 (en) 2018-05-09
EP3413583A1 (en) 2018-12-12
JP6747538B2 (ja) 2020-08-26
WO2016063587A1 (ja) 2016-04-28
US20200213730A1 (en) 2020-07-02
US10306359B2 (en) 2019-05-28
US11172292B2 (en) 2021-11-09
EP3211918B1 (en) 2021-08-25
US20180317005A1 (en) 2018-11-01
US20170280239A1 (en) 2017-09-28
US10674258B2 (en) 2020-06-02
CN105529033B (zh) 2020-11-10

Similar Documents

Publication Publication Date Title
CN108683972B (zh) 声音处理系统
KR102378762B1 (ko) 지향성의 사운드 변형
US10257637B2 (en) Shoulder-mounted robotic speakers
US20110096941A1 (en) Self-steering directional loudspeakers and a method of operation thereof
US20130259244A1 (en) Hearing device with an inertial measurement unit
US20220312128A1 (en) Hearing aid system with differential gain
US20210274292A1 (en) Hearing device including image sensor
US10553196B1 (en) Directional noise-cancelling and sound detection system and method for sound targeted hearing and imaging
US20190079580A1 (en) Sound collecting device and sound collecting device set
EP3195618B1 (en) A method for operating a hearing system as well as a hearing system
JP7118456B2 (ja) 首掛け型装置
JP7065353B2 (ja) ヘッドマウントディスプレイ及びその制御方法
JP2023514462A (ja) 眼鏡フレーム内に一体化可能な補聴システム
US20230036986A1 (en) Processing of audio signals from multiple microphones
WO2024109482A1 (zh) 一种可穿戴拾音设备及拾音方法
US20240098409A1 (en) Head-worn computing device with microphone beam steering
TW202314478A (zh) 音訊事件資料處理
TW202314684A (zh) 對來自多個麥克風的音訊信號的處理
CN118020314A (zh) 音频事件数据处理
CN118020313A (zh) 处理来自多个麦克风的音频信号
CN117499837A (zh) 音频处理方法、装置以及音频播放设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant