KR20140141237A - 오디오 신호와 커맨드의 복합 처리 방법 및 이를 적용한 오디오 시스템 - Google Patents

오디오 신호와 커맨드의 복합 처리 방법 및 이를 적용한 오디오 시스템 Download PDF

Info

Publication number
KR20140141237A
KR20140141237A KR20130062743A KR20130062743A KR20140141237A KR 20140141237 A KR20140141237 A KR 20140141237A KR 20130062743 A KR20130062743 A KR 20130062743A KR 20130062743 A KR20130062743 A KR 20130062743A KR 20140141237 A KR20140141237 A KR 20140141237A
Authority
KR
South Korea
Prior art keywords
audio
command
audio signal
band
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR20130062743A
Other languages
English (en)
Other versions
KR101627785B1 (ko
Inventor
송병철
위정욱
박용석
박경원
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Priority to KR1020130062743A priority Critical patent/KR101627785B1/ko
Publication of KR20140141237A publication Critical patent/KR20140141237A/ko
Application granted granted Critical
Publication of KR101627785B1 publication Critical patent/KR101627785B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

오디오 신호와 커맨드의 복합 처리 방법 및 이를 적용한 오디오 시스템이 제공된다. 본 발명의 실시예에 따른 오디오 처리 방법은, 오디오 신호에 관련한 커맨드를 입력받아 오디오 신호의 특정 대역에 수록하여 전송한다. 이에 의해, 새로운 장비 추가 없이 기존의 오디오 시스템을 이용하여 오디오 관련 커맨드를 전달할 수 있게 된다.

Description

오디오 신호와 커맨드의 복합 처리 방법 및 이를 적용한 오디오 시스템{Integrated Processing Method for Audio Signal and Command and Audio System using the same}
본 발명은 오디오 신호 처리에 관한 것으로, 더욱 상세하게는 오디오 신호를 그와 관련한 커맨드에 따라 처리하기 위한 오디오 처리 방법 및 이를 적용한 오디오 시스템에 관한 것이다.
오디오 시스템은, 마이크로부터 생성된 오디오 신호를 전송하는 송신 시스템과 이 송신 시스템으로부터 수신한 오디오 신호를 기록하는 수신 시스템으로 구분될 수 있다.
오디오 신호를 기록함에 있어, 수신 시스템은 오디오 신호를 그대로 기록할 수도 있지만 필요한 이퀄라이징이나 오디오 효과를 위해 신호 처리를 수행한 후에 기록함이 일반적이다.
라이브 방송, 방송 녹화, 영화/드라마 촬영 등의 경우 오디오 효과를 위한 신호 처리는 오디오 감독이 명령하는데, 현장의 오디오를 정확하게 파악하기 위해 오디오 감독은 마이크가 설치된 송신 시스템에 위치하고 있다.
따라서, 오디오 감독의 명령은 송신 시스템을 통해 입력되어 수신 시스템으로 전달하여 주어야 하는데, 이를 육성으로 전달하는 경우 오디오 신호에 육성이 유입될 수 있어, 커맨드 전달을 위한 별개의 통신장비(예를 들어, 무전기, 휴대전화)를 이용하고 있다.
또한, 수신받은 오디오 감독의 커맨드에 따라 기록 시스템의 모드를 설정하고 필요한 부가 기능을 실행하여야 하는데, 이는 수신 시스템 측에 위치한 오디오 엔지니어의 수동 조작에 의해 이루어진다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, 전송하고자 하는 오디오 신호의 대역 중 일부를 이용하여 오디오와 관련한 커맨드를 전달하여 처리하기 위한 오디오 처리 방법 및 이를 적용한 오디오 시스템을 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 오디오 처리 방법은, 오디오 신호를 생성하는 단계; 상기 오디오 신호에 관련한 커맨드를 입력받는 단계; 상기 오디오 신호의 특정 대역에 상기 커맨드를 수록하는 단계; 및 상기 커맨드가 수록된 상기 오디오 신호를 전송하는 단계;를 포함한다.
그리고, 상기 커맨드는, 사용자의 입력 조작에 의해 생성될 수 있다.
또한, 상기 사용자의 입력 조작은, 유선 또는 무선의 입력기를 통해 이루어질 수 있다.
그리고, 상기 커맨드는, 사용자의 음성 정보를 포함할 수 있다.
또한, 상기 특정 대역은, 특정 주파수 이상의 대역일 수 있다.
그리고, 본 발명의 일 실시예에 따른 오디오 처리 방법은, 상기 커맨드가 수록된 상기 오디오 신호를 수신하는 단계; 상기 오디오 신호에서 상기 커맨드를 분리하는 단계; 및 상기 커맨드에 따라 상기 오디오 신호를 처리하는 단계;를 더 포함할 수 있다.
한편, 본 발명의 다른 실시예에 따른, 오디오 처리 방법은, 커맨드가 수록된 오디오 신호를 수신하는 단계; 상기 오디오 신호에서 상기 커맨드를 분리하는 단계; 및 상기 커맨드에 따라 상기 오디오 신호를 처리하는 단계;를 포함하고, 상기 커맨드는, 상기 오디오 신호의 특정 대역에 수록되어 있다.
그리고, 상기 커맨드는, 사용자의 입력 조작에 의해 생성될 수 있다.
또한, 상기 사용자의 입력 조작은, 유선 또는 무선의 입력기를 통해 이루어질 수 있다.
그리고, 상기 커맨드는, 사용자의 음성 정보를 포함하고, 본 발명의 다른 실시예에 따른 오디오 처리 방법은, 상기 커맨드에서 상기 음성 정보를 추출하여 출력하는 단계;를 더 포함할 수 있다.
이상 설명한 바와 같이, 본 발명의 실시예들에 따르면, PA/SR 방송, 공연 인프라 환경에서 새로운 장비 추가 없이 기존의 오디오 시스템을 이용하여 오디오 관련 커맨드를 전달할 수 있게 된다.
또한, 전달된 커맨드에 따른 이퀄라이징이나 오디오 효과 부여를 위한 신호 처리가 엔지니어의 수동 조작 없이 자동으로 수행가능하여, 오디오 작업 환경의 편의를 증대시킬 수 있다.
도 1은 본 발명이 적용가능한 오디오 시스템의 블럭도,
도 2는, 도 1에 도시된 AIC-T의 상세 블럭도,
도 3은, 도 1에 도시된 AIC-R의 상세 블럭도, 그리고,
도 4는, 도 1에 도시된 커맨드 패드의 상세 블럭도이다.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
도 1은 본 발명이 적용가능한 오디오 시스템의 블럭도이다. 본 발명이 적용가능한 오디오 시스템은, 오디오 신호를 생성 및 전송하여 기록하는 시스템으로, 오디오 신호는 기록 전에 커맨드에 따라 신호 처리된다.
이와 같은 기능을 수행하는 본 발명이 적용가능한 오디오 시스템은, 도 1에 도시된 바와 같이, 1) MIC-L(111), MIC-R(112), AIC-T(Audio In-band Control Transfer)(120), 커맨드 패드(130) 및 오디오 송신 시스템(140)을 포함하는 송신 시스템과, 2) AIC-R(Audio In-band Control Receiver)(150), 오디오 수신 시스템(160), 레코드 시스템(170), 앰프(180) 및 스피커(190)를 포함하는 수신 시스템으로 구축된다.
MIC-L(111)와 MIC-R(112)는 현장의 오디오를 전기신호로 변환하여 오디오 신호를 서라운드로 생성한다.
AIC-T(120)는 MIC(111, 112)에서 생성된 오디오 신호에 커맨드 패드(130)를 통해 입력된 커맨드를 부가하여 오디오 시스템(140)에 전달한다.
도 2는, 도 1에 도시된 AIC-T(120)의 상세 블럭도이다. 또한, 도 2에는 커맨드 패드(130)를 유선 커맨드 패드(130-1)와 무선 커맨드 패드(130-2)의 두 가지 타입으로 예시하여 더 도시하였다.
AIC-T(120)는, 도 2에 도시된 바와 같이, 오디오 입력 단자(121), HACM(High Frequency Audio Command Mux)(122), 오디오 출력 단자(123), CP(Command Process)(124) 및 유/무선 인터페이스(125)를 포함한다.
오디오 입력 단자(121)는 MIC-L(111)와 MIC-R(112)에서 생성된 오디오 신호를 입력받아 HACM(122)으로 전달한다. 본 실시예에서, 오디오 신호의 대역(가청 주파수 대역)은 '16Hz~20kHz'로 상정한다.
유/무선 인터페이스(125)는 커맨드 패드(130-1, 130-2)를 통해 입력된 오디오 감독의 커맨드를 전달받아 CP(124)로 전달한다.
CP(124)는 유/무선 인터페이스(125)로부터 전달받은 오디오 감독의 커맨드를 고주파 가청 대역인 '19kHz~20kHz'에 담아 고주파 오디오 신호로 변환하여, HACM(122)으로 전달한다. HACM(122)에 전달되는 고주파 오디오 신호에는 오디오 감독의 커맨드 정보가 수록되어 있다.
HACM(122)는 오디오 입력 단자(121)를 통해 전달받은 오디오 신호의 '19kHz~20kHz' 대역을 CP(124)를 통해 전달받은 커맨드가 수록된 오디오 신호로 교체하여, 오디오 출력 단자(123)에 전달한다.
이에 의해, 오디오 출력 단자(123)에서는 고주파 대역(19kHz~20kHz)에 커맨드가 부가된 오디오 신호가 출력된다.
HACM(122)에 의해 오디오 신호의 '19kHz~20kHz' 대역에 수록되었었던 원 오디오 성분은 제거된다. 하지만, 이 대역의 오디오 성분은 특수한 악기 등에서의 고음이 없다면 거의 발생하지 않을 뿐만 아니라, 매우 높은 주파수 대역으로 대다수의 사람들은 들을 수 없다. 따라서, '19kHz~20kHz' 대역의 오디오 성분이 제거되더라도, 오디오의 전체 품질에는 거의 영향이 없다.
AIC-T(120)의 오디오 출력 단자(123)에서 출력되는 커맨드가 부가된 오디오 신호는, 오디오 송신 시스템(140)에 의해 AIC-R(150)에 전송된다.
도 3은, 도 1에 도시된 AIC-R(150)의 상세 블럭도이다. AIC-R(150)는, 도 3에 도시된 바와 같이, 오디오 입력 단자(151), HACDM(High frequency Audio Command De-Mux)(152), 오디오 출력 단자(153), CP(Command Process)(154) 및 레코드 시스템 인터페이스(155)를 포함한다.
오디오 입력 단자(151)는 오디오 송신 시스템(140)으로부터 전달받은 커맨드가 수록된 오디오 신호를 입력받아 HACDM(152)으로 전달한다.
HACDM(152)은 입력받은 오디오 신호에서 커맨드가 포함된 '19kHz~20kHz' 대역을 분리하여, 1) 오디오 신호에서 분리된 '19kHz~20kHz' 대역은 CP(154)에, 2) 오디오 신호에 남은 '16Hz~19kHz' 대역은 오디오 출력 단자(153)에, 각각 전달한다.
CP(154)는 HACDM(152)로부터 전달받은 '19kHz~20kHz' 대역의 오디오 신호를 역변환하여 커맨드를 복원한다. CP(154)에서 복원된 커맨드는 레코드 시스템 인터페이스(155)를 통해 레코드 시스템(170)에 전달된다.
한편, 오디오 출력 단자(153)는 HACDM(152)를 통해 전달받은 오디오 신호의 '16Hz~19kHz' 대역을 오디오 수신 시스템(160)으로 전달한다.
다시, 도 1을 참조하여 상세히 설명한다.
오디오 수신 시스템(160)은 AIC-R(150)의 오디오 출력 단자(153)를 통해 수신한 '16Hz~19kHz' 대역의 오디오 신호에 필요한 오디오 신호 처리를 수행하여, 레코드 시스템(170)과 앰프(180)에 전달한다.
앰프(180)는 오디오 수신 시스템(160)으로부터 수신한 오디오 신호를 증폭하여 스피커(190)를 통해 출력한다.
한편, 레코드 시스템(170)은 오디오 수신 시스템(160)으로부터 수신한 오디오 신호를 저장매체에 기록한다. 이때, 레코드 시스템(170)은 AIC-R(150)의 레코드 시스템 인터페이스(155)를 통해 전달되는 커맨드에 따라 오디오 신호에 대해 필요한 이퀄라이징이나 오디오 효과 등을 위한 신호 처리 후에 기록한다.
이하에서는, 도 1에 도시된 커맨드 패드(130)에 대해, 도 4를 참조하여 상세히 설명한다. 도 4는, 도 1에 도시된 커맨드 패드(130)의 상세 블럭도이다.
커맨드 패드(130)는, 도 4에 도시된 바와 같이, 유/무선 인터페이스(131), 배터리(132), 키패드(133), 마이크(134) 및 스피커(135)를 구비한다.
키패드(133)는 오디오 감독이 커맨드를 입력하는데 사용되는 조작 패드이고, 유/무선 인터페이스(131)는 키패드(133)를 통해 입력된 커맨드를 AIC-T(120)에 유/무선으로 전달한다.
배터리(132)는 커맨드 패드(130)에 필요한 전원을 공급하며, 마이크(134)는 오디오 감독의 음성을 오디오 신호로 변환하는 수단이며, 스피커(135)는 오디오 출력을 위한 수단이다.
위 실시예에서, 오디오 신호의 고주파 대역에 오디오 감독의 커맨드가 수록되는 것을 상정하였으나, 마이크(134)를 통해 생성된 오디오 감독의 음성이 오디오 신호의 고주파 대역에 수록되는 것으로 대체가능하다.
오디오 신호에 수록된 오디오 감독의 음성 출력을 위해, AIC-R(150)이나 레코드 시스템(170)에 스피커를 마련하거나, 스피커 장치를 AIC-R(150)에 연결할 것이 필요하다.
한편, 오디오 신호의 고주파 대역에 커맨드와 감독의 음성이 모두 수록되는 것으로 구현하는 경우도 본 발명의 기술적 사상이 적용가능하다.
또한, 커맨드 등이 수록되는 오디오 신호의 고주파 대역은 '19kHz~20kHz' 대역 보다 넓거나 좁을 수 있음은 물론, 이 대역을 벗어날 수도 있다.
예를 들어, 오디오 신호에서 오디오 성분의 크기가 가장 작은 대역에 커맨드 등을 수록하는 것이 가능하다. 더 나아가, 커맨드 등이 수록되는 대역이 호핑(hopping) 되도록 구현할 수 있다.
이 경우, 커맨드 등의 수록에 의해 오디오 성분이 훼손되지만, 이는 한 시점에 대해서 그러하므로, 전/후 수신되는 오디오 성분으로부터 복원하도록 구현할 수 있다.
어떠한, 경우든 커맨드 등이 수록된 대역에 대한 정보가 오디오 신호의 최고주파 대역은 물론 헤더나 예비 영역에 수록하는 것이 필요하다.
본 발명의 기술적 범주에는, 송신 시스템과 수신 시스템을 모두 포함하는 오디오 시스템은 물론, 송신 시스템 또는 수신 시스템만을 구현하는 경우가 모두 포함된다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
111, 112 : MIC
120 : AIC-T(Audio In-band Control Transfer)
122 : HACM(High Frequency Audio Command Mux)
124 : CP(Command Process) 125 : 유/무선 인터페이스
130 : 커맨드 패드 140 : 오디오 송신 시스템
150 : AIC-R(Audio In-band Control Receiver)
152 : HACDM(High frequency Audio Command De-Mux)
160 : 오디오 수신 시스템 170 : 레코드 시스템
180 : 앰프 190 : 스피커

Claims (10)

  1. 오디오 신호를 생성하는 단계;
    상기 오디오 신호에 관련한 커맨드를 입력받는 단계;
    상기 오디오 신호의 특정 대역에 상기 커맨드를 수록하는 단계; 및
    상기 커맨드가 수록된 상기 오디오 신호를 전송하는 단계;를 포함하는 것을 특징으로 하는 오디오 처리 방법.
  2. 제 1항에 있어서,
    상기 커맨드는,
    사용자의 입력 조작에 의해 생성되는 것을 특징으로 하는 오디오 처리 방법.
  3. 제 2항에 있어서,
    상기 사용자의 입력 조작은,
    유선 또는 무선의 입력기를 통해 이루어지는 것을 특징으로 하는 오디오 처리 방법.
  4. 제 1항에 있어서,
    상기 커맨드는,
    사용자의 음성 정보를 포함하는 것을 특징으로 하는 오디오 처리 방법.
  5. 제 1항에 있어서,
    상기 특정 대역은,
    특정 주파수 이상의 대역인 것을 특징으로 하는 오디오 처리 방법.
  6. 제 1항에 있어서,
    상기 커맨드가 수록된 상기 오디오 신호를 수신하는 단계;
    상기 오디오 신호에서 상기 커맨드를 분리하는 단계; 및
    상기 커맨드에 따라 상기 오디오 신호를 처리하는 단계;를 더 포함하는 것을 특징으로 하는 오디오 처리 방법.
  7. 커맨드가 수록된 오디오 신호를 수신하는 단계;
    상기 오디오 신호에서 상기 커맨드를 분리하는 단계; 및
    상기 커맨드에 따라 상기 오디오 신호를 처리하는 단계;를 포함하고,
    상기 커맨드는,
    상기 오디오 신호의 특정 대역에 수록되어 있는 것을 특징으로 하는 오디오 처리 방법.
  8. 제 7항에 있어서,
    상기 커맨드는, 사용자의 입력 조작에 의해 생성되는 것을 특징으로 하는 오디오 처리 방법.
  9. 제 8항에 있어서,
    상기 사용자의 입력 조작은,
    유선 또는 무선의 입력기를 통해 이루어지는 것을 특징으로 하는 오디오 처리 방법.
  10. 제 7항에 있어서,
    상기 커맨드는, 사용자의 음성 정보를 포함하고,
    상기 커맨드에서 상기 음성 정보를 추출하여 출력하는 단계;를 더 포함하는 것을 특징으로 하는 오디오 처리 방법.
KR1020130062743A 2013-05-31 2013-05-31 오디오 신호와 커맨드의 복합 처리 방법 및 이를 적용한 오디오 시스템 Active KR101627785B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130062743A KR101627785B1 (ko) 2013-05-31 2013-05-31 오디오 신호와 커맨드의 복합 처리 방법 및 이를 적용한 오디오 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130062743A KR101627785B1 (ko) 2013-05-31 2013-05-31 오디오 신호와 커맨드의 복합 처리 방법 및 이를 적용한 오디오 시스템

Publications (2)

Publication Number Publication Date
KR20140141237A true KR20140141237A (ko) 2014-12-10
KR101627785B1 KR101627785B1 (ko) 2016-06-07

Family

ID=52458814

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130062743A Active KR101627785B1 (ko) 2013-05-31 2013-05-31 오디오 신호와 커맨드의 복합 처리 방법 및 이를 적용한 오디오 시스템

Country Status (1)

Country Link
KR (1) KR101627785B1 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR0151424B1 (ko) * 1994-12-27 1998-10-15 김광호 음성수신정보 표시장치
KR0164096B1 (ko) * 1994-11-04 1999-01-15 조백제 음성 신호 녹음 장치
KR20050110021A (ko) * 2003-03-17 2005-11-22 코닌클리케 필립스 일렉트로닉스 엔.브이. 오디오 디바이스의 원격 제어 방법
KR20120030628A (ko) * 2010-09-20 2012-03-29 에스케이 텔레콤주식회사 음향통신 기반 사용자인터페이스 제어 시스템 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR0164096B1 (ko) * 1994-11-04 1999-01-15 조백제 음성 신호 녹음 장치
KR0151424B1 (ko) * 1994-12-27 1998-10-15 김광호 음성수신정보 표시장치
KR20050110021A (ko) * 2003-03-17 2005-11-22 코닌클리케 필립스 일렉트로닉스 엔.브이. 오디오 디바이스의 원격 제어 방법
KR20120030628A (ko) * 2010-09-20 2012-03-29 에스케이 텔레콤주식회사 음향통신 기반 사용자인터페이스 제어 시스템 및 방법

Also Published As

Publication number Publication date
KR101627785B1 (ko) 2016-06-07

Similar Documents

Publication Publication Date Title
US9398381B2 (en) Hearing instrument
CN104521247B (zh) 蓝牙耳机助听及抗噪方法和装置
CN108886647B (zh) 耳机降噪方法及装置、主耳机、从耳机及耳机降噪系统
US9344543B2 (en) Utilizing telecoil compatibility on a mobile device for improving frequency range of multimedia playback
US9866947B2 (en) Dual-microphone headset and noise reduction processing method for audio signal in call
EP3827597B1 (en) Bluetooth speaker configured to produce sound as well as simultaneously act as both sink and source
CN104661158A (zh) 立体声耳机、终端及两者的音频信号处理方法
US11102580B2 (en) Headset charger node
US20130122812A1 (en) Short range wireless communication apparatus and method for improving phone sound quality
US8422409B2 (en) System and method of duplex wireless audio link over broadcast channels
US20090196443A1 (en) Wireless earphone system with hearing aid function
CN105392032A (zh) 控制多媒体播放的方法和装置
CN105072538B (zh) 一种立体声播放系统及立体声播放方法
KR101627785B1 (ko) 오디오 신호와 커맨드의 복합 처리 방법 및 이를 적용한 오디오 시스템
US11210058B2 (en) Systems and methods for providing independently variable audio outputs
CN104933849A (zh) 一种基于亚超声波的手机控制家电的系统和方法
US11600288B2 (en) Sound signal processing device
US20180254056A1 (en) Sounding device, audio transmission system, and audio analysis method thereof
CN104038860A (zh) 一种免摘除收听近距离语音的方法和耳机
US10175934B2 (en) System for optimization of music listening
JP5940672B2 (ja) ソース依存の無線イヤフォンの等化
CN204614445U (zh) 一种亚音识别压制系统
US9674326B2 (en) Arrangement with a handset device, an interface unit and a hearing device
CN212163692U (zh) 一种免调试数字音响装置
CN204836530U (zh) 音响

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

D13-X000 Search requested

St.27 status event code: A-1-2-D10-D13-srh-X000

D14-X000 Search report completed

St.27 status event code: A-1-2-D10-D14-srh-X000

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E90F Notification of reason for final refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E90F Notification of reason for final refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

FPAY Annual fee payment

Payment date: 20190313

Year of fee payment: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

FPAY Annual fee payment

Payment date: 20200504

Year of fee payment: 5

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 5

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

FPAY Annual fee payment

Payment date: 20210503

Year of fee payment: 6

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 6

FPAY Annual fee payment

Payment date: 20220502

Year of fee payment: 7

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 7

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R13-asn-PN2301

St.27 status event code: A-5-5-R10-R11-asn-PN2301

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R13-asn-PN2301

St.27 status event code: A-5-5-R10-R11-asn-PN2301

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 8

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 9

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 10

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 11

U11 Full renewal or maintenance fee paid

Free format text: ST27 STATUS EVENT CODE: A-4-4-U10-U11-OTH-PR1001 (AS PROVIDED BY THE NATIONAL OFFICE)

Year of fee payment: 11