RU2012125899A - Устройство - Google Patents

Устройство Download PDF

Info

Publication number
RU2012125899A
RU2012125899A RU2012125899/28A RU2012125899A RU2012125899A RU 2012125899 A RU2012125899 A RU 2012125899A RU 2012125899/28 A RU2012125899/28 A RU 2012125899/28A RU 2012125899 A RU2012125899 A RU 2012125899A RU 2012125899 A RU2012125899 A RU 2012125899A
Authority
RU
Russia
Prior art keywords
specified
change
depending
signal
processing
Prior art date
Application number
RU2012125899/28A
Other languages
English (en)
Other versions
RU2542586C2 (ru
Inventor
Пребен КВИСТ
Бьярне НИЛЬСЕН
Original Assignee
Нокиа Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Нокиа Корпорейшн filed Critical Нокиа Корпорейшн
Publication of RU2012125899A publication Critical patent/RU2012125899A/ru
Application granted granted Critical
Publication of RU2542586C2 publication Critical patent/RU2542586C2/ru

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02165—Two microphones, one receiving mainly the noise signal and the other one mainly the speech signal
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02166—Microphone arrays; Beamforming

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Otolaryngology (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

1. Способ, включающий:определение изменения положения устройства; и обработку по меньшей мере одного звукового сигнала в зависимости от указанного изменения положения.2. Способ по п.1, в котором указанное изменение положения представляет собой по меньшей мере одно из следующего:относительное изменение положения относительно другого объекта; и абсолютное изменение положения.3. Способ по п.1 или 2, в котором указанное изменения положения включает по меньшей мере одно из следующего:поступательное изменение положения; и изменение углового положения.4. Способ по п.1, также включающий:обнаружение первого положения устройства;прием по меньшей мере одного звукового сигнала; иформирование для каждого звукового сигнала по меньшей мере одного параметра обработки сигнала в зависимости от указанного первого положения устройства.5. Способ по п.4, в котором формирование для каждого звукового сигнала по меньшей мере одного параметра обработки сигнала в зависимости от указанного первого положения устройства, включает формирование по меньшей мере одного из следующего:коэффициента усиления; изадержки.6. Способ по п.4 или 5, также включающий:формирование для каждого звукового сигнала по меньшей мере одного дополнительного параметра обработки сигнала в зависимости от указанного обнаруженного изменения положения устройства.7. Способ по п.6, в котором указанное формирование для каждого звукового сигнала по меньшей мере одного дополнительного параметра обработки сигнала включает:определение того, превышает ли указанное изменение положения устройства по меньшей мере одно заранее заданное значение; иформирование указанного по

Claims (20)

1. Способ, включающий:
определение изменения положения устройства; и обработку по меньшей мере одного звукового сигнала в зависимости от указанного изменения положения.
2. Способ по п.1, в котором указанное изменение положения представляет собой по меньшей мере одно из следующего:
относительное изменение положения относительно другого объекта; и абсолютное изменение положения.
3. Способ по п.1 или 2, в котором указанное изменения положения включает по меньшей мере одно из следующего:
поступательное изменение положения; и изменение углового положения.
4. Способ по п.1, также включающий:
обнаружение первого положения устройства;
прием по меньшей мере одного звукового сигнала; и
формирование для каждого звукового сигнала по меньшей мере одного параметра обработки сигнала в зависимости от указанного первого положения устройства.
5. Способ по п.4, в котором формирование для каждого звукового сигнала по меньшей мере одного параметра обработки сигнала в зависимости от указанного первого положения устройства, включает формирование по меньшей мере одного из следующего:
коэффициента усиления; и
задержки.
6. Способ по п.4 или 5, также включающий:
формирование для каждого звукового сигнала по меньшей мере одного дополнительного параметра обработки сигнала в зависимости от указанного обнаруженного изменения положения устройства.
7. Способ по п.6, в котором указанное формирование для каждого звукового сигнала по меньшей мере одного дополнительного параметра обработки сигнала включает:
определение того, превышает ли указанное изменение положения устройства по меньшей мере одно заранее заданное значение; и
формирование указанного по меньшей мере одного дополнительного параметра обработки сигнала для каждого звукового сигнала в зависимости от указанного по меньшей мере одного заранее заданного значения.
8. Способ по п.1 или 2, в котором обработка указанного по меньшей мере одного звукового сигнала в зависимости от указанного изменения положения включает выбор по меньшей мере одного указанного звукового сигнала для вывода в зависимости от указанного изменения положения.
9. Способ по п.1 или 2, в котором обработка по меньшей мере одного звукового сигнала в зависимости от указанного изменения положения, включает формирование диаграммы направленности для указанного по меньшей мере одного звукового сигнала так, чтобы удерживать фокусировку диаграммы направленности на объекте.
10. Способ по п.1 или 2, в котором указанный по меньшей мере один звуковой сигнал включает по меньшей мере один звуковой сигнал, полученный от по меньшей мере одного микрофона.
11. Устройство, включающее по меньшей мере один процессор и по меньшей мере одну память, содержащую компьютерный программный код, при этом указанная по меньшей мере одна память и указанный компьютерный программный код конфигурированы так, чтобы, совместно с указанным по меньшей мере одним процессором, обеспечивать выполнение указанным устройством по меньшей мере следующего:
определения изменения положения указанного устройства; и
обработку по меньшей мере одного звукового сигнала в зависимости от указанного изменения положения.
12. Устройство по п.11, в котором указанное изменение положения представляет собой одно из следующего:
относительное изменение положения относительно другого объекта; и
абсолютное изменение положения.
13. Устройство по п.11 или 12, в котором указанное изменение положения включает по меньшей мере одного из следующего:
поступательное изменение положения; и
изменение углового положения.
14. Устройство по п.11, в котором указанная по меньшей мере одна память и указанный компьютерный программный код конфигурированы так, чтобы, совместно с указанным по меньшей мере одним процессором, также обеспечивать выполнение указанным устройством следующего:
обнаружения первого положения указанного устройства;
приема по меньшей мере одного звукового сигнала; и
формирования для каждого звукового сигнала по меньшей мере одного параметра обработки сигнала в зависимости от указанного первого положения устройства.
15. Устройство по п.14, в котором указанный по меньшей мере один параметр обработки сигнала включает:
коэффициент усиления; и
задержку.
16. Устройство по п.14 или 15, в котором указанная по меньшей мере одна память и указанный компьютерный программный код конфигурированы так, чтобы, совместно с указанным по меньшей мере одним процессором, обеспечивать дополнительное выполнение указанным устройством следующего:
формирование для каждого звукового сигнала по меньшей мере одного дополнительного параметра обработки сигнала в зависимости от указанного обнаруженного изменения положения устройства.
17. Устройство по п.16, в котором формирование для каждого звукового сигнала по меньшей мере одного дополнительного параметра обработки обеспечивает выполнение указанным устройством по меньшей мере следующего:
определение того, превышает ли указанное изменение положения устройства по меньшей мере одно заранее заданное значение; и
формирование указанного по меньшей мере одного дополнительного параметра обработки сигнала для каждого звукового сигнала в зависимости от указанного по меньшей мере одного заранее заданного значения.
18. Устройство по п.11 или 12, в котором обработка указанного по меньшей мере одного звукового сигнала в зависимости от указанного изменения положения обеспечивает выполнение указанным устройством по меньшей мере выбора по меньшей мере одного указанного звукового сигнала для вывода сигнала в зависимости от указанного изменения положения.
19. Устройство по п.11 или 12, в котором обработка указанного по меньшей одного звукового сигнала в зависимости от указанного изменения положения обеспечивает выполнение указанным устройством по меньшей мере формирования диаграммы направленности для указанного по меньшей мере одного звукового сигнала так, чтобы удерживать фокусировку диаграммы направленности на объекте.
20. Устройство по п.11 или 12, в котором указанный по меньшей мере один звуковой сигнал включает по меньшей мере один звуковой сигнал, полученный от по меньшей мере одного микрофона.
RU2012125899/28A 2009-11-24 2009-11-24 Устройство для обработки звуковых сигналов RU2542586C2 (ru)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/EP2009/065778 WO2011063830A1 (en) 2009-11-24 2009-11-24 An apparatus

Publications (2)

Publication Number Publication Date
RU2012125899A true RU2012125899A (ru) 2013-12-27
RU2542586C2 RU2542586C2 (ru) 2015-02-20

Family

ID=42376620

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2012125899/28A RU2542586C2 (ru) 2009-11-24 2009-11-24 Устройство для обработки звуковых сигналов

Country Status (5)

Country Link
US (1) US10271135B2 (ru)
EP (2) EP2505001A1 (ru)
CN (2) CN102696239B (ru)
RU (1) RU2542586C2 (ru)
WO (1) WO2011063830A1 (ru)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5452158B2 (ja) * 2009-10-07 2014-03-26 株式会社日立製作所 音響監視システム、及び音声集音システム
EP2517478B1 (en) 2009-12-24 2017-11-01 Nokia Technologies Oy An apparatus
AU2012311713A1 (en) 2011-09-19 2014-03-13 F. Hoffmann-La Roche Ag Triazolopyridine compounds as PDE10A inhibitors
US20130148811A1 (en) * 2011-12-08 2013-06-13 Sony Ericsson Mobile Communications Ab Electronic Devices, Methods, and Computer Program Products for Determining Position Deviations in an Electronic Device and Generating a Binaural Audio Signal Based on the Position Deviations
US9167520B2 (en) * 2012-03-20 2015-10-20 Qualcomm Incorporated Controlling applications in a mobile device based on environmental context
KR102044498B1 (ko) * 2012-07-02 2019-11-13 삼성전자주식회사 영상 통화 서비스를 제공하기 위한 방법 및 그 전자 장치.
US9131041B2 (en) * 2012-10-19 2015-09-08 Blackberry Limited Using an auxiliary device sensor to facilitate disambiguation of detected acoustic environment changes
EP2819430A1 (en) * 2013-06-27 2014-12-31 Speech Processing Solutions GmbH Handheld mobile recording device with microphone characteristic selection means
EP3029563B1 (en) * 2013-08-30 2018-06-27 Huawei Technologies Co., Ltd. Stereophonic sound recording method, apparatus, and terminal
US9733956B2 (en) * 2013-12-24 2017-08-15 Intel Corporation Adjusting settings based on sensor data
WO2015194326A1 (ja) * 2014-06-17 2015-12-23 シャープ株式会社 音響装置、テレビジョン受像機、スピーカ機器、音声信号調整方法、プログラム、及び、記録媒体
WO2016054090A1 (en) 2014-09-30 2016-04-07 Nunntawi Dynamics Llc Method to determine loudspeaker change of placement
CN104538040A (zh) * 2014-11-28 2015-04-22 广东欧珀移动通信有限公司 一种动态选择通话语音信号的方法和装置
EP3230827A4 (en) * 2014-12-11 2018-04-25 Nuance Communications, Inc. Speech enhancement using a portable electronic device
CN105763956B (zh) 2014-12-15 2018-12-14 华为终端（东莞）有限公司 视频聊天中录音的方法和终端
US10255927B2 (en) * 2015-03-19 2019-04-09 Microsoft Technology Licensing, Llc Use case dependent audio processing
US9716944B2 (en) * 2015-03-30 2017-07-25 Microsoft Technology Licensing, Llc Adjustable audio beamforming
US11064291B2 (en) 2015-12-04 2021-07-13 Sennheiser Electronic Gmbh & Co. Kg Microphone array system
US9894434B2 (en) * 2015-12-04 2018-02-13 Sennheiser Electronic Gmbh & Co. Kg Conference system with a microphone array system and a method of speech acquisition in a conference system
EP3249956A1 (en) * 2016-05-25 2017-11-29 Nokia Technologies Oy Control of audio rendering
CN105979442B (zh) * 2016-07-22 2019-12-03 北京地平线机器人技术研发有限公司 噪声抑制方法、装置和可移动设备
KR20180023617A (ko) * 2016-08-26 2018-03-07 삼성전자주식회사 외부 기기를 제어하는 휴대 기기 및 이의 오디오 신호 처리 방법
JP2018037944A (ja) * 2016-09-01 2018-03-08 ソニーセミコンダクタソリューションズ株式会社 撮像制御装置、撮像装置および撮像制御方法
CN106708041B (zh) * 2016-12-12 2020-12-29 西安Tcl软件开发有限公司 智能音箱、智能音箱定向移动方法及装置
CN107742523B (zh) * 2017-11-16 2022-01-07 Oppo广东移动通信有限公司 语音信号处理方法、装置以及移动终端
GB2582126B (en) * 2019-01-07 2023-04-19 Portable Multimedia Ltd In-vehicle accessory
US10832695B2 (en) * 2019-02-14 2020-11-10 Microsoft Technology Licensing, Llc Mobile audio beamforming using sensor fusion
KR20210050221A (ko) * 2019-10-28 2021-05-07 삼성전자주식회사 전자 장치 및 전자 장치의 빔포밍 제어 방법
US11019219B1 (en) 2019-11-25 2021-05-25 Google Llc Detecting and flagging acoustic problems in video conferencing
CN111586511B (zh) * 2020-04-14 2022-07-05 广东工业大学 一种音频标准化采集设备及方法
RU2743622C1 (ru) * 2020-07-17 2021-02-20 Виктор Павлович Каюмов Система мониторинга орнитологической обстановки в районе аэропорта

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5860215A (ja) 1981-10-06 1983-04-09 Hitachi Ltd 位置検出付エンコ−ダ
US4740924A (en) 1985-02-25 1988-04-26 Siemens Aktiengesellschaft Circuit arrangement comprising a matrix-shaped memory arrangement for variably adjustable time delay of digital signals
US5841878A (en) * 1996-02-13 1998-11-24 John J. Arnold Multimedia collectible
RU2098924C1 (ru) * 1996-06-11 1997-12-10 Государственное предприятие конструкторское бюро "СПЕЦВУЗАВТОМАТИКА" Стереосистема
DE19854373B4 (de) * 1998-11-25 2005-02-24 Robert Bosch Gmbh Verfahren zur Steuerung der Empfindlichkeit eines Mikrofons
JP2002049385A (ja) * 2000-08-07 2002-02-15 Yamaha Motor Co Ltd 音声合成装置、疑似感情表現装置及び音声合成方法
EP1306649A1 (de) * 2001-10-24 2003-05-02 Senstronic (Société Anonyme) Induktive Sensoranordnung zur Erfassung einer Dreh- oder Translationsposition
US8755542B2 (en) * 2003-08-04 2014-06-17 Harman International Industries, Incorporated System for selecting correction factors for an audio system
DE10351509B4 (de) * 2003-11-05 2015-01-08 Siemens Audiologische Technik Gmbh Hörgerät und Verfahren zur Adaption eines Hörgeräts unter Berücksichtigung der Kopfposition
JP2005202014A (ja) * 2004-01-14 2005-07-28 Sony Corp 音声信号処理装置、音声信号処理方法および音声信号処理プログラム
US7499686B2 (en) * 2004-02-24 2009-03-03 Microsoft Corporation Method and apparatus for multi-sensory speech enhancement on a mobile device
US7415117B2 (en) * 2004-03-02 2008-08-19 Microsoft Corporation System and method for beamforming using a microphone array
GB2412034A (en) 2004-03-10 2005-09-14 Mitel Networks Corp Optimising speakerphone performance based on tilt angle
US8095073B2 (en) * 2004-06-22 2012-01-10 Sony Ericsson Mobile Communications Ab Method and apparatus for improved mobile station and hearing aid compatibility
KR20060022053A (ko) * 2004-09-06 2006-03-09 삼성전자주식회사 Ａｖ 시스템 및 그 튜닝 방법
JP2008512888A (ja) * 2004-09-07 2008-04-24 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 改善した雑音抑圧を有する電話装置
GB0426448D0 (en) * 2004-12-02 2005-01-05 Koninkl Philips Electronics Nv Position sensing using loudspeakers as microphones
US7983720B2 (en) * 2004-12-22 2011-07-19 Broadcom Corporation Wireless telephone with adaptive microphone array
JPWO2006075606A1 (ja) * 2005-01-13 2008-06-12 パイオニア株式会社 音案内装置、音案内方法および音案内プログラム
US7995768B2 (en) * 2005-01-27 2011-08-09 Yamaha Corporation Sound reinforcement system
US20060204015A1 (en) * 2005-03-14 2006-09-14 Ip Michael C Noise cancellation module
JP2008537661A (ja) * 2005-03-30 2008-09-18 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 回転カメラユニットを備える携帯型電子装置
US20070036348A1 (en) 2005-07-28 2007-02-15 Research In Motion Limited Movement-based mode switching of a handheld device
RU2008121272A (ru) * 2005-10-28 2009-12-10 Конинклейке Филипс Электроникс Н.В. (Nl) Система и способ для управления устройством, используя расположение и касание
JP4699174B2 (ja) * 2005-10-28 2011-06-08 京セラ株式会社 電子機器、クレードル装置、音響装置及び制御方法
US8291346B2 (en) 2006-11-07 2012-10-16 Apple Inc. 3D remote control system employing absolute and relative position detection
DE602007007581D1 (de) * 2007-04-17 2010-08-19 Harman Becker Automotive Sys Akustische Lokalisierung eines Sprechers
US8175291B2 (en) * 2007-12-19 2012-05-08 Qualcomm Incorporated Systems, methods, and apparatus for multi-microphone based speech enhancement
US20090304205A1 (en) * 2008-06-10 2009-12-10 Sony Corporation Of Japan Techniques for personalizing audio levels
CA2781702C (en) 2009-11-30 2017-03-28 Nokia Corporation An apparatus for processing audio and speech signals in an audio device

Also Published As

Publication number Publication date
US20130083944A1 (en) 2013-04-04
EP3550853A1 (en) 2019-10-09
EP2505001A1 (en) 2012-10-03
US10271135B2 (en) 2019-04-23
CN112019976A (zh) 2020-12-01
CN102696239A (zh) 2012-09-26
WO2011063830A1 (en) 2011-06-03
CN102696239B (zh) 2020-08-25
RU2542586C2 (ru) 2015-02-20

Similar Documents

Publication Publication Date Title
RU2012125899A (ru) Устройство
CN107924681B (zh) 用于在具有语音功能的装置之间的仲裁中的方法以及用于仲裁的系统
RU2012106592A (ru) Формирование диаграммы направленности аудиосигналов
RU2015155321A (ru) Способ и устройство для оптимизации звукового сигнала
CA2819393C (en) Apparatus and method for spatially selective sound acquisition by acoustic triangulation
JP2011080868A5 (ru)
JP6414459B2 (ja) スピーカアレイ装置
WO2014138134A3 (en) Adjusting the beam pattern of a speaker array based on the location of one or more listeners
JP2014085673A (ja) 電子装置の音量をインテリジェントに制御する方法及び実装機器
US20160249132A1 (en) Sound source localization using sensor fusion
JP2015161551A (ja) 音源方向推定装置、音源方向推定方法およびプログラム
RU2012146419A (ru) Устройство и способ акустических измерений множества громкоговорителей и системы направленных микрофонов
JP2015512528A5 (ru)
JP2013531785A5 (ru)
ATE554481T1 (de) Sprecherlokalisierung
RU2015113161A (ru) Устройство и способ для предоставления улучшенных характеристик направленного понижающего микширования для трехмерного аудио
JP2010181890A5 (ru)
RU2012151848A (ru) Способ и устройство для воспроизведения стереофонического звука
RU2019124543A (ru) Звукозапись с использованием формирования диаграммы направленности
RU2014133745A (ru) Оценка положения источника звука
JP2009508175A5 (ru)
JP2017060140A5 (ru)
WO2018209893A1 (zh) 麦克风阵列指向的调整方法和装置
RU2015144134A (ru) Оптимизация прослушивания аудиоподавления перекрестных помех
RU2019132898A (ru) Способ и устройство для обработки сигнала и программа

Legal Events

Date Code Title Description
PC41 Official registration of the transfer of exclusive right

Effective date: 20160602

MM4A The patent is invalid due to non-payment of fees

Effective date: 20191125