CN107532968A - 音频识别装置、音频识别方法和音频识别系统 - Google Patents

音频识别装置、音频识别方法和音频识别系统 Download PDF

Info

Publication number
CN107532968A
CN107532968A CN201580051026.1A CN201580051026A CN107532968A CN 107532968 A CN107532968 A CN 107532968A CN 201580051026 A CN201580051026 A CN 201580051026A CN 107532968 A CN107532968 A CN 107532968A
Authority
CN
China
Prior art keywords
audio
processing unit
speech recognizing
identification information
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580051026.1A
Other languages
English (en)
Other versions
CN107532968B (zh
Inventor
弗兰克·马乔里
保罗·普里布
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sartorius Stedim Biotech GmbH
Original Assignee
Sartorius Stedim Biotech GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sartorius Stedim Biotech GmbH filed Critical Sartorius Stedim Biotech GmbH
Publication of CN107532968A publication Critical patent/CN107532968A/zh
Application granted granted Critical
Publication of CN107532968B publication Critical patent/CN107532968B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00Monitoring arrangements; Testing arrangements
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01MTESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M13/00Testing of machine parts
    • G01M13/02Gearings; Transmission mechanisms
    • G01M13/028Acoustic or vibration analysis
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/80Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using ultrasonic, sonic or infrasonic waves
    • G01S3/801Details
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/16File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G06F16/164File meta data generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/683Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9538Presentation of query results

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Remote Sensing (AREA)
  • Signal Processing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • General Health & Medical Sciences (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • User Interface Of Digital Computer (AREA)
  • Testing And Monitoring For Control Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

提供了一种音频识别装置。所述音频识别装置包括:被配置为捕获存在于处理机构的工作空间中的音频信号的至少一个传感装置,所述处理机构包括至少一个处理装置;且处理器被配置为:接收与至少一个处理装置相关的信息;采用接收到的与至少一个处理装置相关的信息,检索存储在数据库中的音频数据;根据检索的音频数据,通过分析由至少一个传感装置捕获的音频信号识别所述至少一个处理装置的状态;以及输出响应,根据至少一个处理装置的所识别的状态确定该响应。

Description

音频识别装置、音频识别方法和音频识别系统
技术领域
本申请涉及一种用于分析音频信号以识别包括在处理机构(processing setup)中的处理装置的状态的音频识别装置。
背景技术
处理机构可以例如是用于对产品或样品进行特定处理的机构。处理机构还可以是用于制造特定产品的机构。处理机构可以包括至少一个适合于处理机构的至少一个处理装置。因此,不同的处理机构可以包括不同的处理装置。单个处理机构还可以包括多于一个不同的处理装置。
可以通过捕获和分析机器运行时产生的声音,对机器进行测试或诊断。
例如,美国专利文献US6182018B1公开了一种可用于识别机动车辆中的吱吱声、咔嗒声或不期望的噪声的来源的装置。在美国专利文献US 6182018B1中,采用小波分析和根据每个相应系数集合的统计参数对小波系数集合进行分类来分离复合声音信号中的脉冲声音成分。基于统计参数,要么包括整个系数集合,要么基于统计参数从每个相应的分离的成分排除整个系数集合。一旦脉冲声音成分被隔离,将其与参考声音信息进行比较,以根据其潜在的原因对声音进行分类。
此外,例如德国专利文献DE102008057458A1公开了一种通过测量测试流体流经该过滤元件时产生的声音并将所测量的声音与之前在相同条件下采用相同类型的过滤元件测量的声音进行比较,对至少一个设置在过滤器壳体中的过滤元件进行完整性测试的方法。
如上所述,处理机构可以包括多于一个处理装置。此外,不同的处理机构可以包括不同的处理装置。不同的处理装置可以生成不同类型的声音。因此,为了采用声音分析来测试或诊断各种处理装置,用于分析的参考音频数据的量可能变得巨大。
发明内容
根据一个方面,提供了一种音频识别装置。该音频识别装置包括:
至少一个传感装置,被配置为捕获存在于处理机构的工作空间中的音频信号,该处理机构包括至少一个处理装置;和
处理器,被配置为:
接收与至少一个处理装置相关的信息;
采用接收到的与该至少一个处理装置相关的信息检索存储在数据库中的音频数据;
根据该检索到的音频数据,通过分析由至少一个传感装置捕获的该音频信号识别至少一个处理装置的状态;和
输出响应,根据该至少一个处理装置的所识别的状态确定该响应。
附图说明
以下参考示例性的附图详细地解释示例性的实施例。根据说明书、附图和权利要求书,其它特征将变得明显。
图1为音频识别系统的一个实施例的功能性框图。
图2A-2D图示了如何获得处理装置的识别信息。
图3为音频识别系统的另一个实施例的功能性框图。
图4图示了音频识别系统的一个实施例。
图5图示了处理机构的一个实施例的功能性框图。
图6为由音频识别装置的处理器执行示例性处理的流程图。
图7图示了音频识别系统的另一个实施例。
图8图示了音频识别系统的又一个实施例。
图9图示了音频识别系统的再一个实施例。
图10图示了音频识别系统的又一个实施例。
图11图示了音频识别系统的再一个实施例。
图12为在图11所示的实施例的情况下,由音频识别装置的处理器执行处理的示例性流程图。
图13为关闭处理装置的示例性处理的流程图。
图14为处理机构的另一个实施例的功能性框图。
图15A图示了音频产生装置的示例性配置。
图15B图示了音频产生装置的示例性操作。
图16A和16B图示了设置有可消耗部件的音频产生装置的一个实施例。
图17图示了设置有可消耗部件的音频产生装置的另一个实施例。
图18A-18C图示了集成到封闭件中的音频产生装置的实施例。
图19图示了用于实施音频识别装置的计算机的示例性硬件配置。
具体实施例
在下文中,将参考附图对实施例进行详细描述。应当理解的是可以对实施例进行各种修改。具体地,可以合并一个实施例的一个或多个元件且用在其它实施例中以形成新的实施例。
图1为音频识别系统的一个实施例的功能性框图。图示的音频识别系统包括设置在处理机构20的工作空间26中的音频识别装置10。该音频识别装置10可以经由网络30与数据库40连接。网络30可以是通信网络,如LAN(局域网)、WAN(广域网)和因特网。网络30包含无线网络和有线网络中的至少一个。
处理机构20可以例如是在产品或样品上执行特定处理的机构。处理机构20还可以是制造特定产品的机构。处理机构20包括至少一个适合于处理机构20的处理装置22。应当注意的是虽然图1仅仅图示了一个处理装置22,但是处理机构20可以包括多于一个的处理装置22。处理装置22设置有指示处理装置22的识别信息的ID(识别)指示符24。该ID指示符24可以是但不限于机器可读码(如条形码、QR码、数据矩阵码、AR(增强现实)标记等)、适合于OCR(光学字符识别)的字符串、RFID(射频识别)标签或NFC(近场通信)标签。
数据库40可以存储可用于各种处理机构的处理装置的音频数据。数据库40可以存储每个处理装置的与该处理装置的识别信息相关联的音频数据。处理装置的音频数据包括处理装置的正常的运行声音、指示处理装置的机械问题的声音和由处理装置引发的声音中的至少一个。代表机械问题的声音可以包括例如处理装置的刮擦声、摩擦声、隆隆声、敲击声等。由处理装置引起的声音可以包括例如处理装置提供的报警声。
数据库40还可以存储指示处理装置的可能的状态的信息,该信息对应于上述每种声音的音频数据。例如,数据库40可以存储指示处理装置可能处于正常状态的信息,该信息与处理装置的正常运行的声音的音频数据相关联。此外,例如,数据库40可以存储指示处理装置所处的可能的故障模式的信息,该信息与指示处理装置的机械问题的声音的音频数据。类似地,例如,数据库40可以存储指示处理装置所处的可能的故障模式的信息,该信息与由处理装置引发的声音的音频数据相关联。
在运送之前,当对处理装置进行测试时,可以记录和收集存储在数据库40中的音频数据。替代地或附加地,在处理机构中的处理装置的实际操作过程中存储和收集数据库40中的音频数据。
音频识别装置10包括传感装置12、ID检测器14、处理器16和输出装置18。传感装置12可以被配置为捕获存在于处理机构20的工作空间26中的音频信号。传感装置12可以是例如麦克风。虽然图1仅仅图示了一个传感装置12,但是音频识别装置10可以包括多于一个传感装置12。例如,音频识别装置10可以包括一排传感装置12。一排传感装置12可以由麦克风阵列实现。
ID检测器14可以被配置为检测由处理机构22上的ID指示符24指示的识别信息。ID检测器14可以采用与ID指示符24所采用的技术相对应的技术。例如,ID指示符24是机器可读码,如条形码、QR码、数据矩阵码、AR标记等,该ID检测器14是读取装置,该读写装置包括用于扫描机器可读码的成像装置且该读写装置能够解码所扫描的机器可读码。在ID指示符24是适合于OCR的字符串的情况下,ID检测器14是OCR读取器。或者,在ID指示符24是RFID标签或NFC标签的情况下,ID检测器14是RFID读取器或NFC读取器。
在ID检测器14的另一实施例中,ID检测器14包括成像装置,如被配置为捕获处理装置22的图像的相机。在该实施例中,ID检测器14被配置为检测处理装置22的识别信息,该处理装置22对所捕获的图像执行识别的可视化方法。该识别的可视化方法可以包括但不限于图像的相似性搜索、CAD模型跟踪、基于边缘的跟踪和处理装置的3D扫描或基于处理装置的其它可视化地标(visual landmark)的方法。在该实施例中,处理装置22不需要设置ID指示符24。
图2A-2D图示了如何获得处理装置的识别信息的实施例。在图2A-2D所示的实施例中,音频识别装置10在移动设备100上实现且处理装置22是一次性生物反应器220,例如赛多利斯生物技术有限责任公司销售的BIOSTAT CultiBag STR。“生物反应器”可以理解为支持生物活性环境的装置或系统。例如,“生物反应器”可以是细胞或组织在细胞培养环境中生长的装置或系统。
在图2A、2B和2C中,一次性生物反应器220的识别信息由ID指示符24a、24b和24c(如条形码、RFID标签和AR标记)分别指示。图2A、2B和2C所示的移动设备100的显示器18a显示了获得的识别信息和相应的检测装置。在图2D中,一次性生物反应器220的识别信息是从由照相机(如移动设备100)捕获的一次性生物反应器220的图像获得。图2D所示的移动设备100的显示器显示了所获得的识别信息和所捕获的一次性生物反应器220的图像。
再次参考图1,处理器16可以被配置为执行各种处理,以识别处理装置22的状态。处理器16包括接收模块160、识别模块162和输出模块164。接收模块160可以被配置为接收由传感装置12捕获的音频信号和由ID检测器14检测的处理装置22的识别信息。
识别模块162可以被配置为使用接收模块160接收的音频信号和识别信息来识别处理装置22的状态。识别模块162包括检索(retrieving)模块1620,该检索模块1620被配置为采用处理装置22的识别信息经由网络30,检索存储在数据库40中的音频数据。例如,检索模块1620可以被配置为检索存储在数据库40中的与处理装置22的标识信息相关联的音频数据。采用处理装置22的识别信息可以将受到检索的音频数据限制为该处理装置22所专用,这具有增强的可靠性的更快搜索。识别模块162可以被配置为根据由检索模块1620检索的音频数据,通过分析由传感装置12捕获的音频信号识别处理装置22的状态。
例如,识别模块162可以对检索到的音频数据执行类似的检索,将传感装置12捕获的音频信号与检索到的音频数据进行比较。通过识别与传感装置12所捕获的音频信号类似的音频数据,识别模块162可使用指示存储在数据库40中且与识别的音频数据相关联的处理装置22的可能状态的信息,识别处理装置22的状态。例如,识别模块162可以识别处理装置22处于正常状态或特定的故障模式。识别模块162还可以从类似检索的结果中获得处理装置22的所识别状态的置信度(confidence)的百分比。
此外,例如,识别模块162可以确定捕获的音频信号是否包含处理装置22的音频信号,该处理装置22在来自处理装置22的音频信号的标准参数内运行。与处理装置22的识别信息相关联的标准参数可以存储在数据库40中。
识别模块162可以从由传感装置12捕获的音频信号创建音频数据文件并将该音频数据文件以及处理装置22的所识别的状态上传到数据库40。当获得所识别的状态的置信度百分比时,识别模块162还可以将该置信度百分比上传到数据库40。上传音频数据文件可增加未来相似性检索的鲁棒性(robustness)。此外,当不同的处理机构中放置的音频识别装置之间共享数据库40时,上传音频数据文件可辅助识别在其它处理机构中的处理装置的状态。
当分析由传感装置12捕获的音频信号时,识别模块162还可以排除或减少环境噪声污染,例如说话、脚步声、嗡嗡声、回声(在音频识别装置10在有限空间的情况下)或其它装置的运行。这可以通过使用已知的噪声消除技术来进行。
输出模块164被配置为输出基于处理装置22的所识别的状态而确定的响应。例如,该响应可以包括所识别的状态的标示。该响应还可以包括操作者所需的一个或多个动作。所需动作可以包括以下中的至少一个:纠正问题的一个或多个操作、关闭处理装置22以及联系技术支持或服务。要输出的响应可以预先定义为对应于处理装置22的一个或多个可能状态。指示哪个输出的响应对哪个识别的状态的信息可以存储在音频识别装置10内的存储装置(未图示)。可选地或另外,这样的信息可以存储在数据库40中。参考存储装置(未图示)和/或数据库40中的这样的信息,输出模块164可以根据处理装置22的所识别的状态确定该响应。输出模块164可经由输出装置18输出确定的响应和/或向位于音频识别装置10外部的输出装置发送输出信号。
输出装置18可以输出由输出模块164确定的响应。输出装置18可以包括但不限于至少一个如液晶显示器的显示装置、如扬声器的音频输出装置、触觉输出装置和增强现实显示(augmented reality)装置。该响应可以由输出装置18以音频或图像或两者的形式的输出。
输出装置18还可以输出由传感装置12捕获的音频信号。例如,如上所述,识别模块162可以从传感装置12捕获的音频信号创建音频数据文件。该音频数据文件可以存储在音频识别装置10的存储装置(未图示)中,且可以作为音频或直观表示(visualrepresentation)输出,或者作为二者输出。当音频数据文件作为音频输出时,操作者和/或来自技术支持或服务的人员可以听到捕获的音频信号。音频数据文件的直观表示可以提供所捕获的音频信号的波形。
应当注意的是虽然图1中所示的示例性的音频识别装置10包括输出装置18,在另一实施方式中,音频识别装置10不需要包括输出装置18。也就是说,输出装置18可以设置在音频识别装置10的外部。
图3为音频识别系统的另一个实施例的功能框图。在图3中,与图1所示的部件相同的部件由相同的参考标号指示,并省略了对它们的详细说明。图3所示的音频识别装置10a不包括图1所示的ID检测器14。图3所示的处理机构20a不包括图1所示的设置在处理装置22上的ID指示符24。相反,图3所示的处理机构20a包括音频产生装置28。
音频产生装置28可以被配置为输出指示处理装置22的识别信息的音频签名(audio signature)。音频签名可以被理解为包括识别信息的音频信号。音频签名可以是嵌入式音频签名或超声或无声的音频签名。音频识别装置10a的传感装置12可以捕获作为存在于工作空间26中的音频信号的音频签名。音频识别装置10a的处理器16还可以被配置为经由传感装置12接收音频签名并从该音频签名中确定处理装置22的识别信息。
在一个实施例中,音频产生装置28可以是被配置为发射基线谐波声音的谐振器。例如,谐振器可以发射可听范围为4至20kHz的基线声音和超声频率为20kHz-1MHz的基线声音。音频识别装置10a的处理器16可以被配置为从基线谐振声音确定处理装置的识别信息。当图3所示的音频产生装置28为谐振器时,图4图示了音频识别系统的一个实施例。在图4中,音频识别装置10a由移动设备实现,且处理机构20a包括彼此连接的磁性混合器222和的一次性混合容器224,作为处理装置22。的一次性混合容器224包括产生基线谐波声音BS的谐振器2240。基线谐波声音BS通过处理装置222、224谐振。另外,在图4所示的实施例中,磁性混合器222发射出来自混合轴的摩擦声音(grinding sound)GS。移动设备100的麦克风12a(作为音频识别装置10a的传感装置12的实施例)捕获基线谐波声音BS和摩擦声音GS。在移动设备100中实施的处理器16可以确定基线谐波声音BS来自的一次性混合容器224。摩擦声音GS可以通过参考上述实施例所述的数据库40来分析摩擦声音GS,且可以确定的一次性混合容器224的状态。图4所示的移动设备的显示器18a显示基线谐波声音BS和摩擦声音GS的直观表示BS1、GS1。
图5图示了包括了图3所示的音频产生装置28的另一实施例的处理机构的功能性框图。在图5所示的实施例中,处理装置22具有ID指示符24。图5所示的ID指示符24可以与图1和图2A-2C所述的ID指示符24相同。此外,在图5所示的实施例中,音频产生装置28b包括ID检测器280、音频签名生成模块282和音频发射装置284。ID检测器280可以与图1和图2D所述的ID检测器14相同。也就是说,ID检测器280可通过捕获处理装置22的图像或读取机器可读码、OCR的字符串、RFID标签或NFC标签,检测处理装置22的识别信息。音频签名生成模块282产生包括由ID检测器280检测到的处理装置22的识别信息的音频签名。音频发射装置284可以发射由音频签名生成模块282生成的音频签名。然后,音频识别装置10a的处理器16可以从经由传感装置12(参见图3)接收的音频签名确定处理装置22的识别信息。
在图3所示的示例性配置的另一实施例中,音频签名可以是处理装置22的环境音频签名(ambient audio signature)。例如,在操作期间,由处理装置22生成的环境声音(如生物反应器上的旋转叶轮的声音或由完整性测试装置(未图示)排出的压缩空气的声音)可以用作用于识别处理装置22的音频签名。在该实施例中,处理机构20a不需要包括音频产生装置28。
图3-5所述的音频产生装置28和28b要么被集成在处理装置22中,要么可拆卸地联接到处理装置22上。
如上所述的音频识别装置10和10a可以在移动设备(如图2A-2D和图4所示的实施例中)上实现或在可穿戴的装置上实现。可替代地,音频识别装置10和10a可以在处理装置22内的计算机上实现。在又一个实施例中,音频识别装置10和10a可以在处理装置22外部的计算机上实现。在外部计算机上实现的音频识别装置10或10a可移除地联接到处理装置上或放置在工作空间26内的固定位置,而不与处理装置直接接触。此外,例如,在外部计算机上实现的音频识别装置10或10a可以是设置在工作空间26内的监视计算机系统的一部分。
现在参考图6描述由音频识别装置10执行的示例性处理。下面描述的示例性处理可以由如上所述的音频识别装置10和10a的任何实施例执行。此外,在下文中,除非另有说明,关于音频识别装置10的陈述也可用于音频识别装置10a。
图6所示的示例性处理可由音频识别装置10的处理器16执行。处理器16可启动图6所示的示例性处理,以响应操作者通过音频识别装置10的输入装置(未图示)的输入,例如指示音频识别装置10启动该处理。或者,处理器16可以在由操作者预先指定的时间或者在预定时间间隔内启动图6所示的示例性处理。
处理从步骤S10开始。在步骤S10中,处理器16的接收模块160从传感装置12接收音频信号。音频信号已经由处理机构20的工作空间26中的传感装置12捕获。在步骤S10之后,处理进入步骤S12。
在步骤S12中,处理器16的接收模块160接收与处理机构20的至少一个处理装置22相关的信息。例如,接收模块160可以接收由如图1和图2A-2D所述的ID检测器检测到的处理装置22的识别信息。可替代地,接收模块160可以从如图3-5所述的传感装置12接收包括处理装置22的识别信息的音频签名。在步骤S12之后,处理进入步骤S14。
在步骤S14中,处理器16的识别模块162中的检索模块1620采用步骤S12接收的信息检索存储在数据库40中的音频数据。例如,检索模块1620可以检索存储在数据库40中的与处理装置22的识别信息相关联的音频数据。在步骤S12中接收模块160已经接收到包括处理装置22的识别信息的音频签名的情况下,检索模块1620可以在检索音频数据之前,确定来自音频签名的识别信息。在步骤S14之后,处理进入步骤S16。
在步骤S16中,处理器的识别模块162通过基于在步骤S14中检索的音频数据分析音频信号来识别处理装置的状态。例如,识别模块162可以对检索到的音频数据执行相似检索。识别模块162然后可以使用存储在数据库40中且与音频数据相关联的用于指示处理装置22的可能状态的信息识别处理装置22的状态,该音频数据被认为是与音频信号最相似,换句话说是与音频信号是最佳匹配。例如,所识别的状态可以是加工机器的正常状态或特定的故障模式。也可以在步骤S16中执行消除音频信号的噪声,以排除环境噪声污染。在步骤S16中,识别模块162还可以从相似的检索结果中获得处理装置22的识别状态的置信度百分比。在步骤S16之后,处理进行到步骤S18。
在步骤S18中,输出模块164基于在步骤S16中所识别的状态来确定响应。例如,输出模块164可以确定该响应包括处理装置22的所识别的状态的指示。可替代地或另外地,输出模块164可以确定该响应包括操作者的一个或多个所需动作。如图1所示,输出模块164可以通过参考指示处理装置22的每个可能状态的预定响应的信息确定该响应。在步骤S18之后,处理进行到步骤S20。
在步骤S20中,输出模块164输出在步骤S18中确定的响应。输出模块164可以经由输出装置18输出响应。该响应可以以音频或图像或两者的形式输出。图6所示的示例性处理在步骤S20之后结束。
现在将参考图7-13所示的实施例描述上述音频识别系统的其它实施例。图7-13所示的以下实施例并不总是指获得处理装置22的识别信息,但是应当理解的是在图1-5所述的任何形式的这些实施例中也可以获得处理装置22的识别信息。
在图7所示的示例性实施方案中,音频识别装置10在移动设备100上实现,且处理装置22是一次性生物反应器220。一次性生物反应器220包括一次性袋组件2202和马达臂2204。在该实施例中,一次性生物反应器220发射来自安装的一次性袋组件2202上部的摩擦声音GS。移动设备100的麦克风12a(作为音频识别装置10a的传感装置12的实施例)捕获摩擦声音GS。捕获的摩擦声音GS作为移动设备100的显示器18a上的直观表示输出。如上所述,使用存储在数据库40中与一次性生物反应器220的识别信息相关联的音频数据来分析所捕获的摩擦声音GS且识别一次性生物反应器220的状态。关于如何纠正所识别的状态中的问题的指令可以作为移动设备100的显示器18a上的响应输出。
图8为包含在图7所示的一次性生物反应器220中的一次性袋组件2202的示例性主视图。轴通过磁耦合件2208与一次性生物反应器单元内部的一次性袋子2206连接。在图8所示的示例性实施方式中,音频识别装置10在移动设备100上实施。在该实施例中,通过执行图6所述的示例性处理,摩擦声音可以由音频识别装置10识别为是由轴上的轴承引起的。此外,在该实施例中,在移动设备100的显示器18a上显示的响应是对操作者的视觉推荐(visual recommendation),包括根据对捕获的音频信号的分析,采用置信度的百分比来诊断该问题。该响应指示操作者停止一次性生物反应器220并重新调节一次性生物反应器220(见图7)上的电机臂2204,其正在压紧混合器内部的轴,从而导致对一次性袋子2206内的轴的磁耦合件2208上的轴承进行摩擦。该响应也可以通过音频或触觉效果(例如移动设备的振动)来提供。
在图9所示的实施方式中,分析处理装置22产生的声音,以识别处理装置22的状态。在图9中,音频识别装置10在移动设备100上实施,且处理机构包括彼此连接的磁性混合器222和一次性混合容器224,作为处理装置22。在该实施例中,磁性混合器222在操作期间具有错误消息且用一系列蜂鸣声BP来传达错误消息。在该实施例中,一系列蜂鸣声BP发出错误代码,该错误代码表示功率中断,该功率中断已经中断了计划的混合操作。一系列蜂鸣声BP可以由移动设备100的麦克风12a捕获并且以视觉表示(visualrepresentation)的方式在显示器18a上输出。可以根据例如图6所示的示例性处理来分析捕获的声音。因此,表示已经中断了计划的混合操作的功率中断的错误代码可以被识别并显示在显示器18a上。显示器18a上显示的响应包括给操作者如何纠正问题的指令。
在图10所示的示例性实施方式中,捕获并分析连接到处理装置22的振动传感器所产生的声音,以识别处理装置22的状态。在图10中,音频识别装置10在移动设备100上实施,且处理装置22是一次性生物反应器220,其包括一次性袋组件2202和电机臂2204。在该实施例中,振动传感器V可以集成在一次性生物反应器220中或者可移除地连接到一次性生物反应器220上。此外,在该实施例中,一次性生物反应器220正在发射摩擦声GS,该摩擦声来自已经安装的一次性袋组件2202的上部。振动传感器V可以检测已经安装的一次性袋组件2202上发生的摩擦的振动、频率和模式。振动传感器V检测的结果可以由一次性生物反应器220的机载计算机分析,并产生一系列蜂鸣声BP或发送错误代码信号的音调。一系列蜂鸣声BP或音调可以由移动设备100的麦克风12a(如音频识别装置10a的感测装置12的实施例)捕获并且以视觉表示的方式在显示器18a上输出。可以根据图6所示的示例性处理来分析捕获的声音。在移动设备100的显示器18a上输出的响应可以包括关于如何纠正该问题的指令。例如,该响应可以包括建议操作者停止一次性生物反应器220并重新调节一次性生物反应器220上的电机臂2204。
图11图示了另一实施例,在该实施例中,音频识别装置10可以远程地切断处理装置22的电源。在该实施例中,音频识别装置10,10a可以在计算装置102上实施,该计算装置102集成在处理装置22中或者可移除地与处理装置22连接。在如图11所示的实施例中,处理装置22是一次性生物反应器220。一次性生物反应器220可以通过无线电开关2210与电源连接。在该实施例中,一次性生物反应器220发出摩擦声GS,该摩擦声来自已经安装的一次袋组件的上部。根据图6所示的示例性处理,摩擦声GS可以例如由音频识别装置10、10a上的计算装置102捕获和分析。如果一次性生物反应器220的识别状态是先前指定的建议关闭一次性生物反应器220的状态之一,则计算装置102可以例如向通信装置104(例如,移动电话)发送无线警报。计算装置102还可以向通信装置104发送所捕获的声音(的至少一部分),从而使得操作者可以收听到该捕获的声音。发送给通信装置104的警报可以包括需要操作者提供是否允许关闭处理装置的输入信息。操作者可以给予通信装置104输入信号,而通信装置104可以将该输入信号发送回计算装置102。如果操作者的输入信号指示了操作者批准,则计算装置102将无线信号WS输出给无线电开关2210并使用无线电开关2210将电源与一次性生物反应器220断开。在图11所示的示例性变型中,计算装置102可以通过将无线信号WS发送给无线电开关2210来关闭一次性生物反应器220,而不用向操作者的通信装置104发送警报。
在图11所示的示例性实施例中,音频识别装置10的处理器16还可以被配置为如果处理装置22的所识别的状态是指示了关闭至少一个处理装置的指定状态之一,则关闭处理装置22。例如,参考图12和13,处理器16可以被配置为执行如下所述的处理。
图12所示的示例性处理的步骤S10至S18与图6所示的示例性处理的步骤S10至S18相同。在步骤S18中的根据处理装置22的所识别的状态确定响应之后,图12所示的处理进入步骤S30。
在步骤S30中,处理器16确定处理装置22是否关闭与处理装置22的所识别的状态相关联。例如,一个或多个状态可以被预先指定为建议关闭处理装置22的状态。指示这些状态的信息例如可以存储在音频识别装置10的存储装置(未图示)中和/或数据库40中。如果处理器16确定处理装置22的所识别的状态不是指示关闭至少一个处理装置的指定状态之一(步骤S30中为“否”),则处理进入步骤S20。然而,如果处理器16确定处理装置22的识别的状态是指示关闭至少一个处理装置的的指定状态之一(步骤S30中的“是”),则处理进入步骤S32,以关闭处理装置22。
图13图示了图12所示的步骤S30的处理的详细流程图。当处理进行到图12的步骤S30时,处理器16启动图13所示的处理。图13所示的处理从步骤S320开始。
在步骤S320中,处理器16输出需要操作者提供是否允许关闭处理装置22的输入信息。例如,处理器16可以经由无线和/或有线通信网络将这样的信息输出到由操作者使用且位于处理机构20的工作空间26外部的装置。如图11所示,操作者的这种装置的实施例是操作者的通信装置,例如移动电话。在另一实施例中,处理器16可以在步骤S320中将信息输出到包括在音频识别装置10中的输出装置18。在步骤S320之后,处理进行到步骤S322。
在步骤S322中,处理器16确定是否接收到允许关闭处理装置22的输入。操作者可以接收处理器16输出的信息并决定是否允许关闭处理装置22。操作者可以将输入给从处理器16接收到该信息的装置,且该装置可以将输入经由无线和/或有线通信网络发送回处理器16。在步骤S320中将信息输出到包括在音频识别装置10中的输出装置18的情况下,操作者可以经由音频识别装置10的输入装置(未图示)向音频识别装置10给予输入。
如果接收到允许关闭处理装置的输入(步骤S322中的是),则处理进行到步骤S324,且处理器16关闭处理装置22。例如,如图11所示,处理器16可以输出无线电信号,该无线电信号指示无线电开关切断电源与处理装置22的连接。在步骤S324之后,图13所示的处理结束且处理进行到图12的步骤S20。
如果没有接收到允许关闭处理装置22的输入(在步骤S322中为否),则图13所示的处理结束而不执行步骤S324,且处理进行到图12的步骤S20。在步骤S322中,处理器16可以在确定没有接收到允许关闭的输入之前等待一个预定时间段。
再次参考图12,输出确定的响应的步骤S20可以与图6的步骤S20相同。然而,在已经执行了步骤S32的情况下,处理器16还可以在响应中包括已经指示了关闭处理装置22。
在上述各种实施例中,音频识别装置10的处理器16的识别模块162识别指示处理装置22处于正常状态或故障模式的状态。可替代地或另外地,识别模块162可以根据来自处理装置22的声音识别处理装置22的安装和操作的顺序中的步骤。另外,待输出的响应进一步包括操作者的安装和操作指令。在该实施例中,数据库40可以存储处理装置的安装和操作顺序中的步骤,该步骤与由处理装置引入的声音的音频数据和/或在处理装置22的操作期间产生的环境声音的音频数据相关联。例如,来自处理装置22的音频数据(如指示步骤开始或结束的蜂鸣声或一系列蜂鸣声)可以存储在数据库40中,该数据库40与表明处理装置处于步骤的开始或结束的信息相关联。此外,例如,与每个步骤(例如混合器的搅拌或通过泵添加流体)相关联的环境声音的音频数据可以存储在数据库40中,该数据库40与表明处理装置22在该步骤中的信息相关联。基于存储在数据库40中的此类示例性音频数据,识别模块162可识别处理装置22的一系列安装和操作的步骤。可替代地或另外地,处理装置22可发射指示每个步骤的嵌入的音频签名。嵌入的音频签名的实施例包括但不限于每个步骤生成不同的音频频率以及每个步骤生成听不到的音频频率。处理器16可以从由传感装置捕获的音频签名识别安装和操作的步骤。指示哪个音频签名对应于安装和操作的哪个步骤的信息可以存储在音频识别装置10的存储装置(未图示)和/或数据库40中。此外,例如,处理装置22可以采用协作传感装置(如视觉传感装置、RFID读取器或NFC读取器)识别安装或操作步骤,然后输出指示所识别的步骤的音频签名。
上述实施例涉及获得处理装置22的识别信息。在又一实施例中,包括在处理装置22中的组件的识别信息可以由音频识别装置10、10a获得。组件可以是可消耗组件,例如过滤器、袋子、组件、子组件、传感器等。“可消耗”组件可以被理解为可能磨损或耗尽的组件。因此,“可消耗”部件可能必须定期更换。
图14为包括包含可消耗部件50的处理装置22c的处理机构20c的功能性框图。图14所示的处理装置22c包括消耗部件50a、50b和50c。每个可消耗部件50可以设置有音频产生装置60。应当注意的是虽然图14图示了具有相应的音频产生装置60a、60b和60c的三个可消耗部件50a、50b和50c,但是处理装置22c可以包括少于三个或多于三对的可消耗部件50和音频产生装置60。
图15A图示了图14中所示的音频产生装置60的示例性配置。图15A中所示的音频产生装置61可以包括音频发射装置61、一排传感装置62n,62e,62s,62w、内部计算装置63、检测装置64和附加装置65。音频发射装置61可以例如是扬声器。阵列中的每个传感装置62可以是麦克风。麦克风可以是位置可布置的麦克风,例如北麦克风62n、东麦克风62e、南麦克风62s和西麦克风62w。内部计算装置63可以包括处理器630、电源632(例如,电池)、存储器存储装置634和通信/网络装置636。检测装置64可以被配置为检测其上设有音频产生装置60的可消耗部件的识别信息。检测装置64可以例如是RFID读取器640。可替代地,检测装置64可以是机器可读码(例如条形码、QR码或数据矩阵码)的读取器。附加装置65可以例如是电缆扎带或其他附加机构,该其他附加机构使得音频产生装置60能够连接到消耗部件50。可以用作附加装置的附加机构的其他实施例可以包括但不限于成型的附件、连接装置(如夹子、夹具)和紧固件(如弹性带、电缆扎带、钩和环紧固件(例如or )。
音频产生装置60的处理器630可以被配置为使用音频发射装置61发射音频信号。例如,处理器630可以生成音频信号并通知音频发射装置61发射音频信号,该音频信号包括与消耗部件50相关的信息,在该消耗部件50上连接有音频产生装置60。由音频发射装置61发射的音频信号包括音频签名,该音频签名指示了由检测装置64检测的可消耗部件50的识别信息。音频信号还包括与相应的可消耗部件50和其他消耗部件之间的连接相关的信息。
处理器630进一步被配置为识别由一排传感装置62捕获的音频信号的方向性。例如,通过如图15A所示的将传感装置62布置为间隔开的北、东、南和西麦克风62n、62e、62s、62w,处理器632可以被配置为确定声音到达阵列中的一个麦克风而不是阵列中的其他麦克风的飞行时间(time of flight)。处理器630还可以被配置为从飞行时间确定声音源相对于音频产生装置60的方向性和距离。例如,如图15B所示,假设音频信号AS首先到达北麦克风62n,然后是东麦克风62e、西麦克风62w,最后是南麦克风62s。处理器632可以被配置为根据由一排麦克风62检测到的声音序列来确定声音的方向性(在该实施例中,为东北)。声学定位领域中的已知算法(如到达时间延迟(TDOA)定位)可以用于采用麦克风阵列确定声音的方向性。用于声学定位的算法的其它实施例可以包括但不限于转向波束形成器、时间延迟估计(TDE)和主导频率选择(DFSE)。
因此,每个音频产生装置60可以向音频识别装置10呈现音频签名,以确定相应的可消耗部件50的存在、组件内其它相关的可消耗部件的连接以及组件内相应的可消耗部件50的位置。每个音频产生装置60可以根据其所连接的单独的可消耗组件50,以预定和/或预编程的时间间隔呈现音频签名。音频产生装置60可以以不同的时间间隔监听来自其他音频产生装置60的音频签名的出现,以确定组件中其他部件的存在。如上所述,具有麦克风阵列62的音频产生装置60可以根据音频签名到达麦克风阵列中的一个麦克风的飞行时间的延迟来确定其他可消耗部件的距离,并将该飞行时间与到达麦克风阵列中的第二个、第三个、第四个等麦克风的飞行时间进行比较。麦克风阵列62中的麦克风可以布置在音频产生装置60、附加机构或可消耗部件50的端部,以更精确地确定来自另一音频产生装置60的输入音频信号的方向。
方向传感器可以位于音频产生装置内且该方向传感器可以确定并用信号通知可消耗部件的相对方向(上、下、右、左,或者空间中的限定角度)定位。音频产生装置60还可以根据信号的相对音频强度确定消耗部件上的一个音频产生装置到另一个音频产生装置的距离和朝向。
将两个可消耗部件50连接在一起可以改变或变更由音频产生装置60提供的音频签名的呈现。特别是与连接装置连接的音频产生装置60,例如卫生级卡箍(sanitary tri-clamp)连接两个或更多部件。音频产生装置60还可以被配置为根据其他附近的组件的反馈来调整音频签名呈现的时间间隔和/或频率。多个音频产生装置60可以参与多轮呼叫和应答,以确定每个音频产生装置60的最有效的时间间隔(传播延迟)和/或频率,以向音频识别装置10以最有效的方式将可消耗部件50的存在、可消耗部件50的状态以及可消耗部件50的位置作为集合群显现。可以利用马尔科夫链模型、脉冲耦合同步、振荡等待时间的同步、传播延迟和其他网络信号方法,确定组件中和/或工作空间中的所有可消耗部件50的存在、状态和位置。
为了节省音频识别装置10(例如移动设备)的电池电量,音频识别装置10可以被配置为呈现音频签名(呼叫和应答协议),该音频签名可以激活所有音频产生装置60,以根据其分配的时间间隔呈现该音频签名。通过音频签名的反复呼叫和应答以及对预编程(pre-programmed)的间隔的智能延迟的调整,音频产生装置60可以确定最外部的元素且以它们的工作方式来确定工作空间中的所有可消耗组件50的位置。音频产生装置60甚至可以使用不同的端口,确定不同的组装线上哪些元件彼此相邻。通过呼叫和接收这些多次反复(iteration),可以在音频识别装置10内构建3D图,通过出现(emergence)详细描述所有可消耗部件的相对位置。
音频产生装置60可以在对消耗部件消毒之前连接到可消耗部件50。灭菌可以通过例如伽马辐射、高压灭菌、热处理、化学灭菌剂(例如汽化的过氧化氢(VHP)、环氧乙烷(ETO))或其它批准的和可验证的灭菌方法来进行。音频产生装置60可以根据所采用的灭菌方法包括适当的用于电子屏蔽件(未图示)。替代地,音频产生装置60可在对消耗部件50消毒之后连接到消耗部件50。
音频产生装置60可以是一次使用的,即,可以与消耗部件50一起处理。可替代地,音频产生装置60可以是多次使用的,即,音频产生装置60可以在丢弃可消耗部件50之前从可消耗部件50移走。在多次使用的情况下,音频产生装置60可以连接到另一可消耗部件50,以在从要丢弃的可消耗部件50分离之后进一步使用。为了确保合适的多次使用的音频产生装置正确地与正确的可消耗部件连接,音频产生装置和附加装置可以被编码,例如,使用符号进行颜色编码或视觉编码。
图16A和16B图示了设置在包含在处理装置中的可消耗部件上的音频产生装置的实施例。图16A图示了音频产生装置60'和过滤舱(filter capsule)500的实施例。过滤舱500是可消耗部件50的实施例。过滤舱500可以设置有指示可消耗部件50的识别信息的条形码502。音频产生装置60'包括音频发射装置61'、音频检测装置阵列62'、检测装置64'、激活检测装置64'的检测装置按钮66、连接装置65'、使音频产生装置60'知道它已经连接到物体的按钮67以及内部处理装置、存储器存储装置和电源(未图示)。在该实施例中,音频发射装置61'可以是扬声器且音频检测装置阵列62'可以是麦克风阵列。此外,检测装置64'可以是条形码读取器,以从设置在可消耗部件50上的条形码(在该实施例中,从过滤舱500上的条形码502)检测可消耗部件50的识别信息。检测装置64'可以由操作者通过按压检测装置按钮66以扫描条形码502来激活。连接装置65'可以是电缆扎带或其它连接机构。图16B图示了使用连接装置65'将音频产生装置60'与过滤舱500连接。
图17图示了设置在可消耗部件上的音频产生装置的实施例。图17所示的实施例是消耗部件50的制药组件510。这些部件可以包括未连接的无菌连接器512,无菌连接器512上设有音频产生装置601。未连接的无菌连接器512通过管道与预过滤器514连接。音频产生装置602与预过滤器514连接。预过滤器514经由管道与已连接的无菌连接器516连接。音频产生装置603与已连接的无菌连接器516连接。已连接的无菌连接器516经由管道与最终的消毒级(sterilizing grade)过滤器518连接。音频产生装置604与最终的消毒级过滤器518连接。最终的消毒级过滤器518经由管与无菌袋520连接。音频产生装置605与无菌袋520连接。无菌袋520经由不同的管道端口与无菌排气过滤器522连接。音频产生装置606与无菌排气过滤器522连接。
在图17所示的实施例中,与无菌连接器一起使用的音频产生装置可以以这样的方式连接到无菌连接器,使得机构可以确定无菌连接器直接连接到另一无菌连接器,或者没有连接。这可以由两个无菌连接器进行,该无菌连接器包括推动音频产生装置的按钮或区域的完整形状。在该实施例中,音频产生装置601可以确定未连接的无菌连接器512没有与另一个无菌连接器连接。音频产生装置603可以确定已连接的无菌连接器516与另一无菌连接器连接,以进行无菌连接。该信息可以被传送到音频识别装置10,在该实施例中,该音频识别装置10设置在移动设备100上。
除了连接到图17所示的组件上的音频产生装置之外,多个音频产生装置607、608、609和610可以在处理机构的工作空间中的固定位置间隔地安装,该处理机构包括制药组件510。例如,音频产生装置607、608、609和610可以连接在墙上或连接在固定机构上,除了制药组件510之外。音频产生装置607、608、609和610的连接位置可以例如在GPS坐标中定义。具有已知位置的已安装的音频产生装置607、608、609和610可以提供一个参考,以通过音频信号确定具有音频产生装置的其它组件相对工作空间的位置。
图17中所示的音频产生装置可以在预定的间隔通过产生包括相应部件的识别的音频信号,确定与其它可消耗组件的空间关系。其它的音频产生装置监听音频信号且根据在麦克风阵列处捕获的信号的飞行方向和飞行时间,确定相比于其它部件的相对位置。音频产生装置可以首先确定哪些部件在端部,并且通过来自每个部件的音频信号的多次反复(iteration),以它们的方式工作。
图17所示的移动设备100可以被配置为发起呼叫和接收节目,其中可以发送音频信号AS,以启动音频产生装置,从而确定它们相对于彼此的位置。然后,音频产生装置可以使用音频信号互相提供与每个部件和它们的相对位置相关的信息。移动设备100的麦克风12a从音频产生装置捕获音频信号。采用利用来自音频产生装置的音频信号提供的信息,其上设置有音频识别装置10的移动设备100可为操作者提供生产机构中的所有部件的3D位置图以及组装、连接、操作、相关的归档和故障检修的信息。
可以根据多轮音频信号呈现,确定音频产生装置的相对位置。下面将参照图17描述如何执行该确定的实施例。
当图17所示的移动设备100向每个可消耗部件上的音频产生装置发送音频信号AS时,可以激活该部件上的音频产生装置并开始发送信号。来自移动设备100的音频信号AS可以被认为是同步事件。每个部件上的每个音频产生装置可以被预编程为具有预定的时间间隔,在该预定的时间间隔中,音频产生装置输出包括对应部件的识别的音频信号。可以使用质数来设置时间间隔,使得来自不同音频产生装置的音频信号不重叠。例如,音频产生装置601、602、603、604、605和606的时间间隔可以分别设置为11ms、31ms、13ms,37ms、23ms和41ms。然而,应当注意的是时间间隔的值可以被设置为不同于这些示例性的值。
在由来自移动设备100的由音频信号AS发起的第一轮中,部件上的音频产生装置可以以预定时间间隔呈现初始音频信号,以确定组件中的那些部件存在。例如,未连接的无菌连接器512上的音频产生装置601可以输出指示存在未连接的无菌连接器的音频信号,在预定的时间间隔11ms之后,对未连接的无菌连接器进行预编程。类似地,预滤波器514上的音频产生装置602可以输出指示存在预过滤器的音频信号,在预定的时间间隔13ms之后,对未连接的预过滤器进行预编程。这同样可以应用于音频产生装置603、604、605和606。在对应的时间间隔中初始呈现音频信号之后,音频产生装置具有公共延迟周期(例如,100ms)。
在第二轮中,分别在未连接的无菌连接器512和无菌袋520上且位于组件端部上的音频产生装置601和605可根据音频产生装置601的麦克风阵列的方向和到达时间延迟(TDOA)识别它们的一侧上没有部件。音频产生装置601和605可以在它们的音频信号出现之间添加更大的延迟(例如400ms),以允许其它音频生成装置确定它们的位置。
在第三轮中,在除了未连接的无菌连接器512以及位于组件端部的无菌袋520之外的部件上的音频产生装置602、603、604和606可以确定它们相对于在其余部件上的音频产生装置的位置。
在第四轮中,在未连接的无菌连接器516上的音频产生装置603可以识别出它在组件的中间,该未连接的无菌连接器516位于组件的中间。
在第五轮中,每个音频产生装置601-606可以重复输出指示其相对于其他音频产生装置的位置的音频信号。例如,音频产生装置601可以输出指示未连接的无菌连接器512在组件中一直在左侧的位置的音频信号。此外,例如,音频产生装置602可以输出指示预过滤器514位于组件中仅次于左侧的位置的音频信号。来自音频产生装置601-606的音频信号可以由移动设备100的麦克风12a捕获,然后移动设备100可以提供所有部件的位置图。音频产生装置601-606可以关闭演示功能,直到它们从移动设备100接收到下一个命令。
图18A-18C图示了集成到封闭件中的音频产生装置的实施例。图18A图示了具有集成的音频产生装置620的卫生级夹具530的连接器。当卫生级夹具530关闭且翼形螺母闩锁532围绕物体被紧固时,位于夹具内部的压力传感器534被按压,向音频产生装置620提供确认该夹具(clamp)已经被关闭且已经连接的信息。附加地或替代地,当夹具围绕物体闭合时,可以激活夹具内部的按钮536,以向音频产生装置620提供确认已连接的信息。音频产生装置620可以向音频识别装置10广播音频信号,该音频信号提供相邻部件已经连接的信息(连接已经成功)以及所连接的项目相对于其他部件的位置信息。
图18B图示了具有集成的音频产生装置630的管夹540。当管夹540围绕管闭合时,位于管夹540内部的压力传感器542被压下,以确认音频产生装置闭合。附加地或替代地,当管夹具540已经围绕物体闭合时,可以激活管夹540内部的细长按钮544,以向音频产生装置630提供关闭确认。
图18C图示了与具有集成的音频产生装置640的无菌连接器552连接的无菌连接器550。当无菌连接器550与包含有集成的音频产生装置640的无菌连接器552连接时,位于无菌连接器552上的压力传感器554被压下,以确认音频产生装置640关闭。另外地或替代地,当无菌连接器已成功地连接到另一无菌连接器时,无菌连接器552上的按钮556被激活,以确认音频产生装置640关闭。
如上所述的音频识别装置10、10a和音频产生装置28、28b、60可以是可消毒的。该消毒可以例如通过伽马照射、蒸汽灭菌、加热灭菌、微波灭菌、化学灭菌或其它灭菌源进行。音频识别装置和音频产生装置的电子部件可以通过灭菌而变硬。
上述音频识别装置的实施例可以通过计算机来实现。计算机可以是诸如个人计算机的通用计算机。或者,计算机可以是包含在移动设备(如移动电话、可穿戴设备、PDA(个人数字助理)或手提电脑)中的计算机。图19图示了用于实现音频识别装置的计算机的示例性硬件配置。图19中所示的计算机包括处理单元70、系统存储器72、网络接口74、硬盘驱动器(HDD)接口76、外部磁盘驱动器接口78和输入/输出(I/O)接口80。计算机的这些组件经由系统总线82彼此连接。处理单元70可以通过访问系统存储器72来执行算术、逻辑和/或控制操作。处理单元70可以实施为上述示例性音频识别装置的处理器。系统存储器72可以存储与处理单元70结合使用的信息和/或指令。系统存储器72可以包括易失性和非易失性存储器,如随机存取存储器(RAM)720和只读存储器(ROM)722。基本输入/输出系统(BIOS)可以存储在ROM 722中,该系统包含有助于在诸如启动期间在通用计算机内的元件之间传送信息的基本规则。系统总线82可以是几种类型的总线结构中的任一种,包括存储器总线或存储器控制器、外围总线和使用各种总线体系结构中的任一种的局部总线。
计算机可以包括用于经由网络与其他计算机或装置通信的网络接口74。
此外,计算机可以包括用于读取和写入硬盘(未图示)的硬盘驱动器(HDD)84以及用于读取或写入可移动磁盘(未图示)的外部磁盘驱动器86。可移动磁盘可以是用于磁盘驱动器的磁盘或用于光盘驱动器的光盘(如CD ROM)。HDD 84和外部磁盘驱动器86分别通过HDD接口76和外部磁盘驱动器接口78连接到系统总线82。驱动器及其相关联的计算机可读介质提供通用计算机的计算机可读指令、数据结构、程序模块和其他数据的非易失性存储。如本文所描述,数据结构包括用于实现用于音频识别方法的相关数据。相关数据可以被组织在数据库中,例如关系数据库或对象数据库。
尽管本文描述的示例性环境采用硬盘(未图示)和外部磁盘(未图示),但是本领域技术人员应当理解的是可以存储由计算机访问的数据的其他类型的计算机可读介质(例如磁带盒、闪存卡、数字视频磁盘、随机存取存储器、只读存储器等)也可以用于示例性操作环境中。
多个程序模块可以存储在硬盘、外部磁盘、ROM 722或RAM 720中,包括操作系统(未图示)、一个或多个应用程序7202、其它程序模块(未图示)和程序数据7204。应用程序可以包括如上所述的至少一部分功能。
计算机还可以包括音频传感装置88,例如麦克风或麦克风阵列、成像装置90(如相机)、输入装置92(如鼠标和/或键盘)、显示装置94(如液晶显示器)和音频输出装置96(如扬声器)。音频传感装置88、成像装置90、输入装置92、显示装置94和音频输出装置96可以经由I/O接口80a-80e连接到系统总线82。
作为使用如图19所示的计算机的实施方式的补充或替代,这里描述的示例性实施例的功能的一部分或全部可以实现为一个或多个硬件电路。这种硬件电路的实施例可以包括但不限于:大规模集成电路(LSI)、精简指令集电路(RISC)、专用集成电路(ASIC)和现场可编程门阵列(FPGA)。
本申请描述的主题可以被实现为方法或系统,可能为一个或多个计算机程序产品的形式。本申请描述的主题可以在数据信号中或在机器可读介质上实现,其中,介质嵌入在一个或多个信息载体(如CD-ROM、DVD-ROM、半导体存储器或硬盘)中。这样的计算机程序产品可以使数据处理装置执行本申请描述的一个或多个操作。
另外,本申请中描述的主题还可以被实现为包括处理器和与该处理器连接的存储器的系统。存储器可以对一个或多个程序进行编码,以使处理器执行本申请描述的方法中的一个或多个。本申请描述的其它主题可以使用各种机器实现。

Claims (20)

1.一种音频识别装置(10,10a),包括:
至少一个传感装置(12),其被配置为捕获存在于处理机构(20)的工作空间(26)中的音频信号,所述处理机构(20)包括至少一个处理装置(22);和
处理器(16),其被配置为:
接收与所述至少一个处理装置(22)相关的信息;
采用接收到的与所述至少一个处理装置(22)相关的信息,检索存储在数据库(40)中的音频数据;
根据检索到的音频数据,通过分析由所述至少一个传感装置(12)捕获的所述音频信号,识别所述至少一个处理装置(22)的状态;和
输出响应,根据所述至少一个处理装置(22)的所识别的状态,来确定所述响应。
2.根据权利要求1所述的音频识别装置(10,10a),其特征在于:
与所述至少一个处理装置(22)相关的所接收到的信息包括所述至少一个处理装置(22)的识别信息;和
所述处理器(16)还被配置为:
检索存储在数据库(40)中的与所述至少一个处理装置(22)的识别信息相关联地的音频数据。
3.根据权利要求2所述的音频识别装置(10a),其特征在于:
所述处理机构(20a,20b)的所述至少一个处理装置(22)包括音频产生装置(28,28b),所述音频产生装置(28,28b)被配置为输出音频签名,所述音频签名指示了所述至少一个处理装置(22)的识别信息;和
所述处理器(16)还被配置为:
经由所述至少一个传感装置(12)接收所述音频签名;和
从所述音频签名确定所述至少一个处理装置(22)的识别信息。
4.根据权利要求3所述的音频识别装置(10a),其特征在于:
所述音频产生装置(28,28b)是被配置为发出基线谐波声音的谐振器;和
所述处理器(16)还被配置为:
从所述基线谐波声音确定所述至少一个处理装置(22)的识别信息。
5.根据权利要求3所述的音频识别装置(10a),其特征在于:
所述处理机构(20b)的所述至少一个处理装置(22)上设置有识别信息指示符(24),所述识别信息指示符指示了所述至少一个处理装置(22)的识别信息;
所述音频产生装置(28b)包括识别信息检测器(280),所述识别信息检测器(280)被配置为检测由设置在所述至少一个处理装置(22)上的所述识别信息指示符(24)指示的识别信息;和
音频产生装置(28b)输出音频签名,所述音频签名指示了由所述识别信息检测器(280)检测的识别信息。
6.根据权利要求2所述的音频识别装置(10),其特征在于:
所述处理机构(20)的所述至少一个处理装置(22)上设置有识别信息指示符(24),所述识别信息指示符(24)指示了所述至少一个处理装置(22)的识别信息;
所述音频识别装置(10)还包括:
识别信息检测器(14),其被配置为检测由设置在所述至少一个处理装置(22)上的所述识别信息指示符(24)指示的识别信息;和
所述处理器(16)还被配置为:
从所述识别信息检测器(24)接收所述至少一个处理装置(22)的识别信息。
7.根据权利要求2所述的音频识别装置(10,10a),其特征在于,还包括:
成像装置,其被配置为捕获所述处理机构(20)的所述至少一个处理装置(22)的图像;
其中,所述处理器(16)还被配置为:
接收由所述成像装置捕获的所述至少一个处理装置(22)的图像;和
从接收到的所述至少一个处理装置(22)的图像确定所述至少一个处理装置(22)的识别信息。
8.根据权利要求1至7中任一项所述的音频识别装置(10,10a),其特征在于,所述处理器(16)还被配置为:
从由所述至少一个传感装置(12)捕获的音频信号生成音频数据文件;和
将所生成的音频数据文件存储在所述数据库(40)中。
9.根据权利要求8所述的音频识别装置(10,10a),其特征在于,所述处理器(16)还被配置为:
输出所生成的音频数据文件作为至少一个音频和视觉表示。
10.根据权利要求1至9中任一项所述的音频识别装置(10,10a),其特征在于,所述处理器(16)还被配置为:
如果所述至少一个处理装置(22)的所识别的状态是指示关闭所述至少一个处理装置(22)的指定状态中的一个,则关闭所述处理装置(22)。
11.根据权利要求1至10中任一项所述的音频识别装置(10,10a),其特征在于,响应输出包括与操作者的一个或多个所需动作相关的信息。
12.根据权利要求11所述的音频识别装置(10,10a),其特征在于:
操作者的所述一个或多个所需动作包括提供输入,所述输入指示了是否允许关闭所述处理装置(22);和
所述处理器(16)还被配置为:
接收所述操作者的所述输入;和
如果所接收到的输入指示了所述操作者允许关闭所述处理装置(22),则关闭所述处理装置(22)。
13.根据权利要求1至12中任一项所述的音频识别装置(10,10a),其特征在于:
对由所述至少一个传感装置(12)捕获的音频信号的分析包括对所检索到的音频数据执行相似性检索;和
基于所述相似性检索的结果,所述响应包括所述至少一个处理装置(22)的所识别的状态的置信度的百分比。
14.根据权利要求1至13中任一项所述的音频识别装置(10,10a),其特征在于,所述音频识别装置(10,10a)是可灭菌的。
15.根据权利要求1至14中任一项所述的音频识别装置(10,10a),其特征在于,所述音频识别装置(10,10a)实施在移动设备上。
16.根据权利要求1至15中任一项所述的音频识别装置(10,10a),其特征在于,所述音频识别装置(10,10a)包括在所述处理机构(20)的所述处理装置(22)中。
17.根据权利要求1至16中任一项所述的音频识别装置(10,10a),其特征在于:
所述处理机构(20c)的所述至少一个处理装置(22)包括多个部件(50a,50b,50c),多个部件(50a,50b,50c)中的每一个都设置有音频产生装置(60a,60b,60c),所述音频产生装置(60a,60b,60c)包括:
一排传感装置(62),其被配置成捕获存在于所述处理机构(20c)的所述工作空间中的音频信号;
音频发射装置(61),其被配置为发射音频信号;
处理器(630),其被配置为:
识别由一排所述传感装置(62)捕获的所述音频信号的方向性;
采用识别的所述方向性产生位置信息,所述位置信息包括所述部件的相对位置,在所述部件上设置有所述音频产生装置(60a,60b,60c);和
命令所述音频发射装置(61)发射音频信号,所述音频信号包括产生的所述部件的位置信息和识别信息,所述部件上设置有所述音频产生装置(60a,60b,60c);和
所述音频识别装置(10,10a)的所述处理器(16)还被配置为:
通过从设置在每个所述部件(50a,50b,50c)上的所述音频产生装置(60a,60b,60c)发射的所述音频信号中提取每个所述部件(50a,50b,50c)的所述位置信息和所述识别信息,识别多个所述部件(50a,50b,50c)的位置。
18.一种音频识别方法,包括:
由至少一个传感装置(12)捕获存在于处理机构(20,20a,20b,20c)的工作空间中的音频信号,所述处理机构(20,20a,20b,20c)包括至少一个处理装置(22);
由处理器接收与所述至少一个处理装置(22)相关的信息;
由处理器采用接收到的与所述至少一个处理装置(22)相关的信息,检索存储在数据库(40)中的音频数据;
由处理器根据所述检索到的音频数据,通过分析由所述至少一个传感装置捕获的所述音频信号,识别所述至少一个处理装置(22)的状态;和
由所述处理器输出响应,根据所述至少一个处理装置(22)的所述识别的状态,确定所述响应。
19.一种音频识别装置(10,10a),包括:
至少一个传感装置(12),其被配置为捕获存在于处理机构(20,20a,20b,20c)的工作空间中的音频信号,所述处理机构(20,20a,20b,20c)包括至少一个处理装置;和
处理器(16),其被配置为:
根据存储在数据库(40)中的音频数据,通过分析由所述至少一个传感装置(12)捕获的所述音频信号,识别所述至少一个处理装置(22)的状态;
输出响应,根据所述至少一个处理装置(22)的所识别的状态,确定所述响应。
20.一种音频识别系统,包括:
音频识别装置(10,10a),所述音频识别装置(10,10a)包括至少一个传感装置(12)和处理器(16);和
多个音频产生装置(60a,60b,60c),每个所述音频产生装置(60a,60b,60c)设置在多个部件(50a,50b,50c)的一个上,所述部件(50a,50b,50c)包含在处理机构(20c)的至少一个处理装置(22c)中,其中:
每个所述音频产生装置(60a,60b,60c)包括:
一排传感装置(62),其被配置为捕获存在于所述处理机构(20c)的工作空间中的音频信号;
音频发射装置(61),其被配置为发射音频信号;
处理器(630),其被配置为:
识别由一排所述传感装置(62)捕获的所述音频信号的方向性;
采用识别的所述方向性产生位置信息,所述位置信息包括所述部件(50a,50b,50c)的相对位置,所述部件(50a,50b,50c)上设置有所述音频产生装置(60a,60b,60c);和
命令所述音频发射装置发射音频信号,所述音频信号包括所述部件(50a,50b,50c)的所产生的位置信息和识别信息,所述部件(50a,50b,50c)上设置有所述音频产生装置(60a,60b,60c);
所述音频识别装置(10,10a)的所述至少一个传感装置(12)被配置为:
捕获存在于所述处理机构(20c)的工作空间中的音频信号;和
所述音频识别装置(10,10a)的所述处理器(16)被配置为:
通过从设置在每个所述部件(50a,50b,50c)上的所述音频产生装置(60a,60b,60c)发射的所述音频信号中提取每个所述部件(50a,50b,50c)的所述位置信息和所述识别信息,识别多个所述部件(50a,50b,50c)的位置。
CN201580051026.1A 2014-10-01 2015-09-28 音频识别装置、音频识别方法和音频识别系统 Active CN107532968B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/503,533 US10057699B2 (en) 2014-10-01 2014-10-01 Audio identification device, audio identification method and audio identification system
US14/503,533 2014-10-01
PCT/EP2015/001915 WO2016050347A2 (en) 2014-10-01 2015-09-28 Audio identification device, audio identification method and audio identification system

Publications (2)

Publication Number Publication Date
CN107532968A true CN107532968A (zh) 2018-01-02
CN107532968B CN107532968B (zh) 2019-09-13

Family

ID=54337232

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580051026.1A Active CN107532968B (zh) 2014-10-01 2015-09-28 音频识别装置、音频识别方法和音频识别系统

Country Status (6)

Country Link
US (1) US10057699B2 (zh)
EP (1) EP3155394B1 (zh)
JP (1) JP6644060B2 (zh)
KR (1) KR101877313B1 (zh)
CN (1) CN107532968B (zh)
WO (1) WO2016050347A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113012714A (zh) * 2021-02-22 2021-06-22 哈尔滨工程大学 基于像素注意力机制胶囊网络模型的声学事件检测方法

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9971667B1 (en) * 2012-11-30 2018-05-15 Discovery Sound Technology, Llc Equipment sound monitoring system and method
US10156844B1 (en) * 2012-11-30 2018-12-18 Discovery Sound Technology, Llc System and method for new equipment configuration and sound monitoring
EP3177258A4 (en) 2014-08-08 2018-09-12 Fremon Scientific, Inc. Smart bag used in sensing physiological and/or physical parameters of bags containing biological substance
US9971344B2 (en) * 2015-03-27 2018-05-15 Rockwell Automation Technologies, Inc. Systems and methods for assessing a quality of an industrial enterprise
US9924224B2 (en) 2015-04-03 2018-03-20 The Nielsen Company (Us), Llc Methods and apparatus to determine a state of a media presentation device
KR102402512B1 (ko) * 2015-08-04 2022-05-27 삼성전자주식회사 외부장치의 음량을 조정하는 전자장치 및 방법
US10334360B2 (en) * 2017-06-12 2019-06-25 Revolabs, Inc Method for accurately calculating the direction of arrival of sound at a microphone array
US11847773B1 (en) 2018-04-27 2023-12-19 Splunk Inc. Geofence-based object identification in an extended reality environment
US10816446B2 (en) 2018-05-07 2020-10-27 Fremon Scientific, Inc. Thawing biological substances
US11188292B1 (en) 2019-04-03 2021-11-30 Discovery Sound Technology, Llc System and method for customized heterodyning of collected sounds from electromechanical equipment
KR20210042442A (ko) * 2019-10-10 2021-04-20 삼성전자주식회사 전자장치 및 그 제어방법
CN110996197B (zh) * 2019-11-15 2021-05-28 歌尔股份有限公司 音频设备的控制方法、音频设备及存储介质
US11965859B1 (en) 2020-11-18 2024-04-23 Discovery Sound Technology, Llc System and method for empirical estimation of life remaining in industrial equipment
US20230122420A1 (en) * 2021-10-15 2023-04-20 Gulfstream Aerospace Corporation Directional array intercom for internal communication on aircraft
US11856147B2 (en) 2022-01-04 2023-12-26 International Business Machines Corporation Method to protect private audio communications
GB2614539B (en) * 2022-01-05 2024-05-08 Sony Interactive Entertainment Inc Content generation system and method

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090091441A1 (en) * 2007-10-09 2009-04-09 Schweitzer Iii Edmund O System, Method, and Apparatus for Using the Sound Signature of a Device to Determine its Operability
CN101907487A (zh) * 2009-06-03 2010-12-08 神讯电脑(昆山)有限公司 电脑杂音辨识器
US20110211760A1 (en) * 2000-11-06 2011-09-01 Boncyk Wayne C Image Capture and Identification System and Process
CN202547770U (zh) * 2012-04-18 2012-11-21 嘉应学院 异音辨识系统
CN102985965A (zh) * 2010-05-24 2013-03-20 微软公司 声纹标识
US20130297256A1 (en) * 2012-05-04 2013-11-07 Jun Yang Method and System for Predictive and Conditional Fault Detection

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1998023938A1 (en) * 1996-11-29 1998-06-04 Arçelik A.S. A quality control system for testing mechanical devices
US6182018B1 (en) 1998-08-25 2001-01-30 Ford Global Technologies, Inc. Method and apparatus for identifying sound in a composite sound signal
JP3951092B2 (ja) * 2000-11-06 2007-08-01 日本精工株式会社 異常診断システム及び異常診断方法
JPWO2003100678A1 (ja) * 2002-05-24 2005-09-29 株式会社日立製作所 設備の製作又はその保全作業の支援システム及び監視操作システム
US20070112563A1 (en) * 2005-11-17 2007-05-17 Microsoft Corporation Determination of audio device quality
JP2008107251A (ja) * 2006-10-26 2008-05-08 Matsushita Electric Works Ltd 位置検出システム
JP2008204158A (ja) * 2007-02-20 2008-09-04 Nsk Ltd 製品情報提供システム、製品情報管理サーバおよび機械要素、並びに製品情報提供方法
JP4900345B2 (ja) 2008-08-26 2012-03-21 株式会社 日立オートパーツ&サービス 車両の簡易再診診断装置および車両の簡易再診診断方法
DE102008057458B4 (de) 2008-11-14 2012-04-26 Sartorius Stedim Biotech Gmbh Verfahren und Vorrichtung zur Durchführung von Integritätstests
JP5427054B2 (ja) * 2010-01-29 2014-02-26 株式会社日立ハイテクインスツルメンツ 異常検出装置を備えた部品実装装置
US8843348B2 (en) * 2011-06-14 2014-09-23 Hamilton Sundstrand Corporation Engine noise monitoring as engine health management tool
US8572009B2 (en) * 2011-08-16 2013-10-29 The Boeing Company Evaluating the health status of a system using groups of vibration data including images of the vibrations of the system
US20150168256A1 (en) * 2012-04-24 2015-06-18 Keith Hamilton Method, computer program product & system
JP6051691B2 (ja) * 2012-08-31 2016-12-27 株式会社リコー 機器連携プログラム、機器連携システム、機器連携方法、及び携帯端末
US20150310723A1 (en) * 2014-04-29 2015-10-29 Aktiebolaget Skf Trending machine health data using rfid transponders

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110211760A1 (en) * 2000-11-06 2011-09-01 Boncyk Wayne C Image Capture and Identification System and Process
US20090091441A1 (en) * 2007-10-09 2009-04-09 Schweitzer Iii Edmund O System, Method, and Apparatus for Using the Sound Signature of a Device to Determine its Operability
CN101907487A (zh) * 2009-06-03 2010-12-08 神讯电脑(昆山)有限公司 电脑杂音辨识器
CN102985965A (zh) * 2010-05-24 2013-03-20 微软公司 声纹标识
CN202547770U (zh) * 2012-04-18 2012-11-21 嘉应学院 异音辨识系统
US20130297256A1 (en) * 2012-05-04 2013-11-07 Jun Yang Method and System for Predictive and Conditional Fault Detection

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113012714A (zh) * 2021-02-22 2021-06-22 哈尔滨工程大学 基于像素注意力机制胶囊网络模型的声学事件检测方法
CN113012714B (zh) * 2021-02-22 2022-08-02 哈尔滨工程大学 基于像素注意力机制胶囊网络模型的声学事件检测方法

Also Published As

Publication number Publication date
WO2016050347A2 (en) 2016-04-07
KR20170045291A (ko) 2017-04-26
US20160100265A1 (en) 2016-04-07
JP2018500620A (ja) 2018-01-11
EP3155394A2 (en) 2017-04-19
US10057699B2 (en) 2018-08-21
WO2016050347A3 (en) 2017-10-05
KR101877313B1 (ko) 2018-08-09
CN107532968B (zh) 2019-09-13
JP6644060B2 (ja) 2020-02-12
EP3155394B1 (en) 2019-07-17

Similar Documents

Publication Publication Date Title
CN107532968B (zh) 音频识别装置、音频识别方法和音频识别系统
CN111511287B (zh) 从医学图像自动提取超声心动图测量结果
US8737168B2 (en) System and method for automatic determination of the physical location of data center equipment
US9349098B1 (en) Cognitive medical and industrial inspection system and method
EP3759558B1 (en) Intelligent audio analytic apparatus (iaaa) and method for space system
CN108935188A (zh) 猪只疾病识别方法、装置及电子设备
CN112639431A (zh) 异常预测系统和异常预测方法
CN105372584B (zh) 一种微动开关测试方法、装置及系统
EP4061230B1 (en) Systems and methods for obtaining medical ultrasound images
CN110737201B (zh) 一种监护方法、装置、存储介质及空调
CN106662869B (zh) 用于高级过程控制的系统和方法
JP6865901B1 (ja) 診断システム、診断方法及びプログラム
Siddique et al. A Hybrid Deep Learning Approach: Integrating Short-Time Fourier Transform and Continuous Wavelet Transform for Improved Pipeline Leak Detection
CN105431092A (zh) 对介入仪器的声学突出显示
US9992570B2 (en) Auralization for multi-microphone devices
CN110111815A (zh) 动物异常声音监控方法及装置、存储介质、电子设备
CN110287090A (zh) 一种超声软件的自动化测试方法及系统
Zaheer et al. A survey on artificial intelligence-based acoustic source identification
Verma et al. Android app for intelligent CBM
US10186253B2 (en) Control device for recording system, and recording system
CN212461143U (zh) 一种基于数据可视化展示技术的语音识别交互系统
US20230377718A1 (en) Medical tool aiding diagnosed psychosis patients in detecting auditory psychosis symptoms associated with psychosis
Huetz et al. Bioacoustics approaches to locate and identify animals in terrestrial environments
KR20200090553A (ko) 전자 장치 및 전자 장치의 제어 방법
US20230021243A1 (en) System and method for teaching smart devices to recognize audio and visual events

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant