KR100667814B1 - 전기 기타의 톤 및 이펙터 기능을 갖는 휴대용 오디오 재생장치 - Google Patents

전기 기타의 톤 및 이펙터 기능을 갖는 휴대용 오디오 재생장치 Download PDF

Info

Publication number
KR100667814B1
KR100667814B1 KR1020050088213A KR20050088213A KR100667814B1 KR 100667814 B1 KR100667814 B1 KR 100667814B1 KR 1020050088213 A KR1020050088213 A KR 1020050088213A KR 20050088213 A KR20050088213 A KR 20050088213A KR 100667814 B1 KR100667814 B1 KR 100667814B1
Authority
KR
South Korea
Prior art keywords
audio
electric guitar
effect
impedance matching
microphone
Prior art date
Application number
KR1020050088213A
Other languages
English (en)
Inventor
성호영
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020050088213A priority Critical patent/KR100667814B1/ko
Application granted granted Critical
Publication of KR100667814B1 publication Critical patent/KR100667814B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10009—Improvement or modification of read or write signals
    • G11B20/10018—Improvement or modification of read or write signals analog processing for digital recording or reproduction
    • G11B20/10027—Improvement or modification of read or write signals analog processing for digital recording or reproduction adjusting the signal strength during recording or reproduction, e.g. variable gain amplifiers
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H3/00—Instruments in which the tones are generated by electromechanical means
    • G10H3/12—Instruments in which the tones are generated by electromechanical means using mechanical resonant generators, e.g. strings or percussive instruments, the tones of which are picked up by electromechanical transducers, the electrical signals being further manipulated or amplified and subsequently converted to sound by a loudspeaker or equivalent instrument
    • G10H3/14—Instruments in which the tones are generated by electromechanical means using mechanical resonant generators, e.g. strings or percussive instruments, the tones of which are picked up by electromechanical transducers, the electrical signals being further manipulated or amplified and subsequently converted to sound by a loudspeaker or equivalent instrument using mechanically actuated vibrators with pick-up means
    • G10H3/18—Instruments in which the tones are generated by electromechanical means using mechanical resonant generators, e.g. strings or percussive instruments, the tones of which are picked up by electromechanical transducers, the electrical signals being further manipulated or amplified and subsequently converted to sound by a loudspeaker or equivalent instrument using mechanically actuated vibrators with pick-up means using a string, e.g. electric guitar
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/155—Musical effects
    • G10H2210/195—Modulation effects, i.e. smooth non-discontinuous variations over a time interval, e.g. within a note, melody or musical transition, of any sound parameter, e.g. amplitude, pitch, spectral response, playback speed
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G11B2020/10537—Audio or video recording
    • G11B2020/10546—Audio or video recording specifically adapted for audio data

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

전기 기타의 톤(tone)발생 및 이펙트(effect) 기능을 구비한 휴대용 오디오 재생 장치가 개시되어 있다. 본 발명은 전기 기타의 픽업에서 발생하는 신호를 임피던스 매칭시키는 픽업 임피던스 정합부, 마이크로폰에서 발생하는 오디오 신호를 임피던스 매칭시키는 마이크 임피던스 정합부, 오디오 재생/녹화 및 전기 기타 이펙트 모드에 따라 마이크 임피던스 정합부에서 입력되는 신호를 각각 오디오 디코딩과 오디오 레코딩 처리하고, 픽업 임피던스 정합부에서 입력되는 신호를 전기 기타의 이펙트 필터 모듈을 조합 또는 선택하여 전기 기타의 이펙트로 처리하는 디지털 신호 처리부, 디지털 신호 처리부에서 디코딩 또는 이펙트로 처리된 신호를 헤드폰을 위한 소정 레벨로 증폭시키는 헤드폰 앰프부를 포함한다.

Description

전기 기타의 톤 및 이펙터 기능을 갖는 휴대용 오디오 재생 장치{Portable audio apparatus having tone and effect function of electric guitar}
도 1은 본 발명에 따른 휴대용 오디오 재생 장치의 전체 블록도이다.
도 2는 도 1의 디지털 신호 처리부(140)에서 처리되는 신호 처리 흐름도이다.
본 발명은 MP3 플레이어와 같은 휴대용 오디오 재생 장치에 관한 것이며, 특히 전기 기타의 톤(tone)발생 및 이펙트(effect) 기능을 구비한 휴대용 오디오 재생 장치에 관한 것이다.
통상적으로 휴대용 MP3 플레이어는 단순한 음악 재생 기능 뿐만 아니라 여러 가지 오디오 프로세싱 기능들이 추가된다.
한편, 전기 기타(Electric guitar)는 전기적인 장치들을 이용하고 혼합하여 효과가 처리된'Effecting 된' 소리를 내는 기타이다. 이 전기 기타는 픽업이라는 기기가 현의 울림으로 인해서 생기는 공명상태와 전기적인 신호를 잡아내어 소리화 하여 출력해준다. 이러한 전기 기타의 이펙트 혹은 톤 발생기는 아날로그 방식으로 는 특정한 소리 효과를 위해 각각의 회로를 만들어 한가지 혹은 두 가지 이상의 조합으로 제작되어 독립적으로 판매되거나 근래에는 디지탈 신호처리 기술을 이용하여 소프트웨어로 시뮬레이션하기도 하는데 일반적으로 크기가 크고 휴대가 불편할 뿐 아니라 파워 앰프에 연결하여 소리를 듣기까지 여러 단계를 거쳐야 하는 단점이 있었다.
본 발명이 이루고자하는 기술적 과제는 휴대용 MP3 플레이어에 전기 기타의 톤 발생기 및 이펙트 박스 기능을 부가함으로써 사용자의 편의성을 도모한 휴대용 오디오 재생 장치를 제공하는 데 있다.
상기의 기술적 과제를 해결하기 위하여, 본 발명은 오디오 재생 장치에 있어서,
전기 기타의 픽업에서 발생하는 신호를 임피던스 매칭시키는 픽업 임피던스 정합부;
마이크로폰에서 발생하는 오디오 신호를 임피던스 매칭시키는 마이크 임피던스 정합부;
오디오 재생/녹화 및 전기 기타 이펙트 모드에 따라 상기 마이크 임피던스 정합부에서 입력되는 신호를 각각 오디오 디코딩과 오디오 레코딩 처리하고, 상기 픽업 임피던스 정합부에서 입력되는 신호를 전기 기타의 이펙트 필터 모듈을 조합 또는 선택하여 전기 기타의 이펙트로 처리하는 디지털 신호 처리부;
상기 디지털 신호 처리부에서 디코딩 또는 이펙트로 처리된 신호를 헤드폰을 위한 소정 레벨로 증폭시키는 헤드폰 앰프부를 포함하는 것을 특징으로 한다.
이하 첨부된 도면을 참조로하여 본 발명의 바람직한 실시예를 설명하기로 한다.
본 발명은 디지탈 신호처리를 이용한 휴대용 오디오 재생 장치에 적용되는 다양한 후처리 기술들이 전기 기타의 디지탈 이펙트 기술과 중복되는 것이 다수 존재하는 것에 착안한다. 예를 들면 이퀄라이져나 음장효과에 사용하는 딜레이(delay), 피치 스케일(pitch scale)등이 해당되며 그 외의 다른 필터 모델 추가가 가능하다. 이러한 이펙트 박스는 오디오 재생의 기능을 할 때와 마찬가지로 외부 파워 앰프에 연결하면 대출력으로 즐길 수 있으며 헤드폰이나 이어폰으로도 들을 수 있는 간편한 이펙트 박스가 된다.
도 1은 본 발명에 따른 휴대용 오디오 재생 장치의 전체 블록도이다.
도 의 휴대용 오디오 재생 장치는 픽업 임피던스 정합부(110)와 마이크 임피던스 정합부(120), ADC(Analog-Digital Converter)부(130), 디지털 신호 처리부(140), 키이셋부(150), DAC(Digital-Analog Converter)부(160), 헤드폰 앰프부(170), 메모리부(180), 디스플레이부(190)로 구성된다. 디지털 신호 처리부(140)에는 오디오 디코더와 여러 가지 이펙트가 포함된 소프트 모듈을 포함하고 있으며 유저는 키 입력으로 사용하고자 하는 모드에 해당하는 이펙트(effect)를 선택할 수 있다.
스위칭부(SW)는 2개의 접점 스위치를 두어 단일 입력 포트(101)에서 오디오 레코딩을 위한 마이크 입력과 전기 기타의 픽업 입력중에 어느 하나를 선택한다.
픽업 임피던스 정합부(110)는 전기 기타의 이펙트 기능을 위해 전기 기타의 픽업에서 발생하는 신호를 임피던스 매칭시킨다. 그리고 마이크 임피던스 정합부(120)는 녹음 기능을 위해 마이크로폰에서 발생하는 신호를 임피던스 매칭시킨다. 녹음 기능을 위한 마이크로폰 입력을 전기 기타 신호 입력으로 사용할 수 있다. ADC부(130)는 픽업 임피던스 정합부(110) 또는 마이크 임피던스 정합부(120)중에서 선택된 경로를 따라 들어온 아날로그 오디오 입력 신호를 디지털 오디오 신호로 변환한다.
키이 셋부(150)는 오디오 재생 모드, 전기 기타 이펙트 모드, 녹화 모드를 선택하고 그 밖의 각종 기능을 선택한다.
디지털 신호 처리부(140)는 오디오 디코더 및 전기 기타 이펙트 필터등을 소프트웨어로 모듈화하여 함께 구비하며, 키이셋부(150)의 모드 선택에 따라 ADC부(130)로부터 입력되는 신호를 소정의 신호 처리 모듈에 의해 오디오 디코딩, 레코딩 또는 전기 기타의 이펙트 기능을 처리한다. 디지털 신호 처리부(140)는 디지탈 오디오 재생 모드가 선택되었을 때엔 오디오 디코딩과 같이 기존의 디지탈 오디오 재생장치와 동일하게 이용할 수 있다. 디지털 신호 처리부(140)는 상세하게 오디오 디코더 뿐만 아니라 이퀄라이져(equalizer), 음장, 버츄얼라이져(virtualizer), 피치 스케일링(pitch scaling) 및 기타 오디오 신호 후처리 모듈이 들어 있으며 오디오 재생시에 그 기능을 사용하여 청취할 수도 있고 바이패스(bypass)할 수도 있다. 디지털 신호 처리부(140)는 보이스 녹화 모드일 경우 마이크를 통해 들어온 오디오 입력신호를 녹음할 수 있도록 마이크로폰 임피던스 매칭 경로를 따라 신호를 받아 메모리부(180)에 기록된다. 또한 디지털 신호 처리부(140)는 전기 기타 이펙트 모드일 경우 픽업 임피던스 경로를 따라 수신되는 신호를 키이 셋부(150)에 의한 사용자의 선택에 따라 이미 모듈로 구현되어 있는 이퀄라이져(Equalizer), 딜레이(Delay)와 같은 기능의 필터를 통과하게 한다. 이때 이퀄라이져(Equalizer), 딜레이(Delay)등의 기능은 통상적인 디지털 신호 프로세서로 구현 가능하며 오디오 플레이어의 부가 기능으로 흔히 이용되는 것이기도 하다. 또한 전기 기타의 이펙트로 이용되거나 특정 톤으로 재생하도록 하는 필터들은 소프트웨어로 모델링하여 모듈로 디지털 신호 처리부(140)에 저장되어 있다. 이 필터들은 이펙트에 따라서 한 개씩 독립적으로 사용할 수도 있고 두 개 이상 조합을 할 수도 있다. 사용자는 키이 셋부(150)의 키이 셋과 디스플레이부(190)의 터치 스크린을 이용하여 사용하려는 필터 모델을 지정할 수 있다.
DAC부(160)는 디지털 신호 처리부(140)에서 오디오 디코딩 또는 전기 기타의 이펙트 처리된 디지털 오디오 신호를 아날로그 오디오 신호로 변환한다.
디스플레이부(190)는 디지털 신호 처리부(140)의 각종 오디오 정보를 디스플레이하고 터치 스크린을 구비하여 디지털 신호 처리부(140)에 기능 선택 명령을 인가한다.
헤드폰 앰프부(170)는 DAC부(160)에서 출력되는 오디오 신호를 헤드폰을 위해 소정 레벨 증폭시켜 오디오 출력포트로 출력된다.
사용자는 오디오 출력 포트를 통하여 헤드폰이나 파워 앰프를 통해 사운드 또는 전기 기타의 이펙트를 수신한다.
도 2는 도 1의 디지털 신호 처리부(140)에서 처리되는 신호 처리 흐름도이다.
먼저, 사용자의 선택에 의해 오디오 재생 모드, 녹화 모드, 전기 기타 이펙트 모드를 판단한다.
오디오 재생 모드일 경우(210) 메모리에 저장되어 있는 오디오 파일을 재생하고(220), 사용자의 설정에 따라 필터를 이용한 후처리를 수행한다(230).
녹화 모드일 경우(240) 마이크를 통해 입력되는 오디오 신호를 메모리에 저장한다(250)
또한 전기 기타 이펙트 모드일 경우(260) 픽업에 의한 입력 신호를 디지털 신호 처리기로 입력 한 후(270) 사용자의 설정에 따라 톤 발생 및 이펙트 모듈을 구동한다(280).
최종적으로 오디오 재생 모드에서 후처리된 신호 및 전기 기타 이펙트 모드에서 이펙트 처리된 신호는 헤드 폰 앰프 또는 파워 앰프로 출력된다.
이상과 같이 도면과 명세서에서 최적 실시예가 개시되었으며, 여기서 사용된 용어들은 단지 본 발명을 설명하기 위한 목적에서 사용된 것이며, 의미한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능할 것이며, 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 하드디스크, 플로피디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드로서 저장되고 실행될 수 있다.
상술한 바와 같이 본 발명에 의하면, 전기 기타(Electric Guitar)의 이펙트 모듈과 휴대용 MP3 플레이어를 결합한 장치로써 디지탈 오디오 신호처리 과정에서 공통적으로 이용할 수 있는 기능을 적절히 활용함으로써 기존 미디어 재생장치에 새로운 기능을 추가하여 새로운 제품을 만들고 또 크기가 크고 휴대가 불편했던 전기 기타의 이펙트 박스(effect box) 역할을 구현해 줄 수 있어 헤드폰 또는 오디오 파워 앰프가 있는 곳에서 사용자에게 손쉽게 소리를 들을 수 있도록 편의를 제공할 수 있다.

Claims (5)

  1. 오디오 재생 장치에 있어서,
    전기 기타의 픽업에서 발생하는 신호를 임피던스 매칭시키는 픽업 임피던스 정합부;
    마이크로폰에서 발생하는 오디오 신호를 임피던스 매칭시키는 마이크 임피던스 정합부;
    오디오 재생/녹화 및 전기 기타 이펙트 모드에 따라 상기 마이크 임피던스 정합부에서 입력되는 신호를 각각 오디오 디코딩과 오디오 레코딩 처리하고, 상기 픽업 임피던스 정합부에서 입력되는 신호를 전기 기타의 이펙트 필터 모듈을 조합 또는 선택하여 전기 기타의 이펙트를 발생하는 디지털 신호 처리부;
    상기 디지털 신호 처리부에서 디코딩 또는 이펙트로 처리된 신호를 헤드폰을 위한 소정 레벨로 증폭시키는 헤드폰 앰프부를 포함하는 오디오 재생 장치.
  2. 제1항에 있어서, 단일 입력 포트를 사용하여 오디오 레코딩을 위한 마이크 입력과 전기 기타의 픽업 입력중에 어느 하나를 선택하는 포트 스위칭부를 더 포함하는 것을 특징으로 하는 오디오 재생 장치.
  3. 제1항에 있어서, 상기 디지털 신호 처리부는 전기 기타의 톤 발생 및 이펙트 필터 모듈을 소프트웨어로 구비함을 특징으로 하는 오디오 재생 장치.
  4. 제1항에 있어서, 상기 디지털 신호 처리부는 전기 기타 이펙트 모드일 경우사용자의 선택 사양에 따른 전기 기타의 톤 및 이펙트 필터의 선택 및 조합 기능을 구비하는 것을 특징으로 하는 오디오 재생 장치.
  5. 제1항에 있어서, 상기 디지털 신호 처리부는
    오디오 재생 모드일 경우 메모리에 저장되어 있는 오디오 파일을 재생하고, 사용자의 설정에 따라 필터를 이용한 후처리를 수행하고,
    녹화 모드일 경우 마이크를 통해 입력되는 오디오 신호를 메모리에 저장하고,
    전기 기타 이펙트 모드일 경우 전기 기타의 픽 업에 의한 입력 신호를 사용자의 설정에 따라 톤 발생 및 이펙트 모듈을 실행하는 수단임을 특징으로 하는 오디오 재생 장치.
KR1020050088213A 2005-09-22 2005-09-22 전기 기타의 톤 및 이펙터 기능을 갖는 휴대용 오디오 재생장치 KR100667814B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050088213A KR100667814B1 (ko) 2005-09-22 2005-09-22 전기 기타의 톤 및 이펙터 기능을 갖는 휴대용 오디오 재생장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050088213A KR100667814B1 (ko) 2005-09-22 2005-09-22 전기 기타의 톤 및 이펙터 기능을 갖는 휴대용 오디오 재생장치

Publications (1)

Publication Number Publication Date
KR100667814B1 true KR100667814B1 (ko) 2007-01-11

Family

ID=37867790

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050088213A KR100667814B1 (ko) 2005-09-22 2005-09-22 전기 기타의 톤 및 이펙터 기능을 갖는 휴대용 오디오 재생장치

Country Status (1)

Country Link
KR (1) KR100667814B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109874086A (zh) * 2019-03-28 2019-06-11 深圳市威拓思音乐有限公司 一种耳放连接装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109874086A (zh) * 2019-03-28 2019-06-11 深圳市威拓思音乐有限公司 一种耳放连接装置
CN109874086B (zh) * 2019-03-28 2023-11-10 深圳市威拓思音乐有限公司 一种耳放连接装置

Similar Documents

Publication Publication Date Title
JP4726875B2 (ja) オーディオ信号処理方法および装置
CN1941073B (zh) 用于消除音频信号中的人声分量的设备和方法
CN102820026A (zh) 重放设备、信号处理设备和信号处理方法
JP2008085412A (ja) オーディオ再生装置
KR20120047977A (ko) 디바이스에서의 ｍ-ｓ 스테레오 재생
KR20160018710A (ko) 사운드 처리 방법 및 단말 디바이스
KR101489035B1 (ko) 오디오 신호 프로세싱을 위한 방법 및 장치
JP2011100156A (ja) アコースティック／エレクトリックギターの自動演奏及び録音装置
US8816182B2 (en) Digital audio connections for portable handheld computing devices
Corbett Mic it!: microphones, microphone techniques, and their impact on the final mix
d'Escrivan Music technology
Bartlett et al. Recording Music on Location: Capturing the Live Performance
WO1997030564A1 (fr) Dispositif electronique acoustique
US7122732B2 (en) Apparatus and method for separating music and voice using independent component analysis algorithm for two-dimensional forward network
CN1131471A (zh) 音响重放装置
KR100667814B1 (ko) 전기 기타의 톤 및 이펙터 기능을 갖는 휴대용 오디오 재생장치
JP4591391B2 (ja) オーディオデータ再生装置および携帯端末装置
JP6155633B2 (ja) マルチトラック録音装置
JP4458269B2 (ja) ノイズキャンセルヘッドフォン
JP2004163681A (ja) 音声信号処理装置及び音声信号処理コンピュータプログラム
US8195317B2 (en) Data reproduction apparatus and data reproduction method
US20060161277A1 (en) Portable personal pocket-sized audio sound equalizer to be used in-line with headphones or speakers
JP2008225474A (ja) デジタル音声信号を作るための装置および方法
CN201667200U (zh) 一种卡拉ok电路及电视机
JP4435452B2 (ja) 信号処理装置、信号処理方法、プログラムおよび記録媒体

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121228

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20131230

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20141223

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee