KR100857720B1 - 방송 수신 방법, 방송 수신 장치 및 이를 가지는 휴대용단말기 - Google Patents

방송 수신 방법, 방송 수신 장치 및 이를 가지는 휴대용단말기 Download PDF

Info

Publication number
KR100857720B1
KR100857720B1 KR1020060043666A KR20060043666A KR100857720B1 KR 100857720 B1 KR100857720 B1 KR 100857720B1 KR 1020060043666 A KR1020060043666 A KR 1020060043666A KR 20060043666 A KR20060043666 A KR 20060043666A KR 100857720 B1 KR100857720 B1 KR 100857720B1
Authority
KR
South Korea
Prior art keywords
signal
high frequency
audio
frequency signal
audio signal
Prior art date
Application number
KR1020060043666A
Other languages
English (en)
Other versions
KR20070110964A (ko
Inventor
이동기
김상현
Original Assignee
(주)케이티에프테크놀로지스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)케이티에프테크놀로지스 filed Critical (주)케이티에프테크놀로지스
Priority to KR1020060043666A priority Critical patent/KR100857720B1/ko
Publication of KR20070110964A publication Critical patent/KR20070110964A/ko
Application granted granted Critical
Publication of KR100857720B1 publication Critical patent/KR100857720B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4392—Processing of audio elementary streams involving audio buffer management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/455—Demodulation-circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H2201/00—Aspects of broadcast communication
    • H04H2201/10—Aspects of broadcast communication characterised by the type of broadcast system
    • H04H2201/11—Aspects of broadcast communication characterised by the type of broadcast system digital multimedia broadcasting [DMB]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Circuits Of Receivers In General (AREA)

Abstract

이동 중의 잡음의 영향을 줄일 수 방송 수신 장치의 방송 수신 방법은 수신된 고주파 신호를 복조하여 오디오 신호 및 비디오 신호 중의 적어도 하나로 분리하는 단계와, 상기 고주파 신호의 강도를 검출하는 단계와, 방송 수신 장치가 이동하여 상기 검출된 고주파 신호의 강도가 제1 기준치 이하인 경우 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 감소시키는 단계를 포함한다. 또한, 방송 수신 장치가 이동하여 상기 검출된 고주파 신호의 강도가 제2 기준치 이상인 경우 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 증가시키는 단계를 더 포함할 수 있다. 방송 수신 장치 및 이를 가지는 휴대용 단말기가 이동 중의 방송 수신시 잡음을 제거 또는 완화하여 출력함으로써 잡음의 영향을 줄일 수 있고, 이동 중의 방송 수신시 음질을 개선할 수 있다.

Description

방송 수신 방법, 방송 수신 장치 및 이를 가지는 휴대용 단말기{BROADCASTING RECEIVER AND PORTABLE TERMINAL HAVING THE SAME}
도 1은 본 발명의 일실시예에 따른 DMB 방송 수신 장치를 개략적으로 나타낸 블록도이다.
도 2는 본 발명의 일실시예에 따른 DMB 방송 수신 장치에서의 볼륨 제어를 설명하기 위한 그래프이다.
도 3은 본 발명의 일실시예에 따른 DMB 방송 수신 장치에서의 볼륨 제어 방법을 설명하기 위한 순서도이다.
도 4는 본 발명의 다른 실시예에 따른 DAB 수신 장치를 개략적으로 나타낸 블록도이다.
도 5는 본 발명의 일실시예에 따른 DMB 방송 수신 장치를 가지는 이동 통신 단말기를 나타낸 블록도이다.
<도면의 주요 부분에 대한 부호의 설명>
125, 425 : 방송 수신부 100, 400 : 출력 제어 모듈
143 : 비디오 버퍼 145 : 오디오 버퍼
본 발명은 방송 수신 장치에 관한 것으로, 더욱 상세하게는 휴대용 단말기에 적용할 수 있는 이동 중의 방송 수신시 발생하는 잡음을 줄이기 위한 방송 수신 장치 및 상기 방송 수신 장치를 가지는 휴대용 단말기에 관한 것이다.
최근 CD, DVD등 뛰어난 음질을 가지는 디지털 비디오 기기가 널리 보급되어 고급 음질을 요구하는 디지털 방송에 대한 사용자의 요구가 증가하고 있다. 이에 따라 기존의 FM 방송이 제공할 수 있는 음질의 한계를 극복하기 위해 유럽, 캐나다, 미국 등에서 디지털 오디오 방송(Digital Audio Broadcasting, 이하 'DAB'라고 함)을 시행하고 있다. DAB 서비스는 기존의 AM 방송이나 FM 방송과는 전혀 다른 기술을 이용하여 고품질의 음질뿐만 아니라, 이동 중에도 뛰어난 수신 성능을 보여주며, 영상이나 문자와 같은 멀티미디어 데이터도 고속으로 전송할 수 있는 특성을 가지고 있다.
최근에는 오디오 방송보다는 영상을 포함하는 다양한 멀티미디어 서비스를 강조하여 디지털 멀티미디어 방송(Digital Multimedia Broadcasting, 이하 'DMB'라고 함)이라 부른다. DMB는 이동 중에도 DVD 수준의 화질을 가진 영상과 CD 수준 음질을 가진 오디오 및 데이터 등의 멀티미디어 서비스가 가능한 디지털 방식의 멀티미디어 방송으로서, 전송 수단(지상파/위성)에 따라서 지상파(Terrestrial) DMB와 위성 DMB로 구분된다.
DMB수신기(휴대용 단말기 포함)가 DMB 방송 수신 신호가 작은 난청 지역과 DMB 방송 수신 신호가 양호한 지역간을 이동할 때, 특히 난청 지역에서 양호 지역 으로 진입 시에 단발적인 고주파 성분의 심한 잡음이 발생한다.
상기 잡음은 수신 난청지역과 양호지역을 오가는 과정에서 발생한 오류가 있는 프레임을 거르지 않고 디코더 단으로 넘겨주는 등 신호가 단절되는 시점 또는 신호 단절후 재수신되는 시점에서 하드웨어 및 소프트웨어적으로 여러 가지 원인으로 발생할 수 있다. 상기 잡음은 이동중인 사용자의 DMB 방송 청취에 불편을 초래하고 있다.
따라서, 본 발명의 제1 목적은 이동 중의 방송 수신시 잡음의 영향을 줄이기 위한 방송 수신 방법을 제공하는 것이다.
또한, 본 발명의 제2 목적은 이동 중의 방송 수신시 잡음의 영향을 줄이기 위한 방송 수신 장치를 제공하는 것이다.
또한, 본 발명의 제3 목적은 이동 중의 방송 수신시 잡음의 영향을 줄이기 위한 방송 수신 장치를 가지는 휴대용 단말기를 제공하는 것이다.
상술한 본 발명의 제1 목적을 달성하기 위한 본 발명의 일측면에 따른 방송 수신 장치의 방송 수신 방법은 수신된 고주파 신호를 복조하여 오디오 신호 및 비디오 신호 중의 적어도 하나로 분리하는 단계와, 상기 고주파 신호의 강도를 검출하는 단계와, 방송 수신 장치가 이동하여 상기 검출된 고주파 신호의 강도가 제1 기준치 이하인 경우 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 감소시키는 단계를 포함한다. 상기 고주파 신호의 강도가 상기 제1 기 준치 이하로 낮아진 시점부터 소정 시간 후인 잡음 발생 가능 시점에 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 출력을 막을 수 있다. 상기 방송 수신 장치가 이동하여 상기 검출된 고주파 신호의 강도가 제2 기준치 이상인 경우 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 증가시키는 단계를 더 포함할 수 있다. 상기 고주파 신호의 강도를 검출하는 단계는 안테나로부터 직접 수신된 고주파 신호의 강도를 감지함으로써 상기 고주파 신호의 강도를 검출할 수 있다. 상기 방송 수신 장치는 디지털 멀티미디어 방송 수신기 또는 디지털 오디오 방송 수신기가 될 수 있다.
제2 목적을 달성하기 위한 본 발명의 일 측면에 따른 방송 수신 장치는 수신된 고주파 신호를 복조하는 방송 수신부와, 상기 복조된 신호로부터 오디오 신호 및 비디오 신호 중의 적어도 하나를 분리하는 복호부와, 상기 고주파 신호의 강도를 검출하고, 상기 검출된 고주파 신호의 강도가 제1 기준치 이하인 경우 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 감소시키도록 제어하는 출력 제어부를 포함한다. 상기 출력 제어부는 상기 검출된 고주파 신호의 강도가 제2 기준치 이상인 경우 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 증가시킬 수 있다.
제3 목적을 달성하기 위한 본 발명의 일 측면에 따른 휴대용 단말기는 수신된 고주파 신호를 복조하는 방송 수신부와, 상기 복조된 신호로부터 오디오 신호 및 비디오 신호 중의 적어도 하나를 분리하고, 상기 고주파 신호의 강도를 검출하고, 상기 검출된 고주파 신호의 강도가 제1 기준치 이하인 경우 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 감소시키도록 제어하는 출력 제어 모듈과, 상기 오디오 신호를 출력하는 사운드 출력부와, 상기 비디오 신호를 출력하는 디스플레이부를 포함한다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 이하, 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 1은 본 발명의 일실시예에 따른 DMB 방송 수신 장치를 개략적으로 나타낸 블록도이고, 도 2는 본 발명의 일실시예에 따른 DMB 방송 수신 장치에서의 볼륨 제어를 설명하기 위한 그래프이다.
도 1을 참조하면, 본 발명의 일실시예에 따른 DMB 방송 수신 장치는 안테나(101), 방송 수신부(125), 출력 제어 모듈(100), 디스플레이부(170) 및 오디오 출력부(180)를 포함한다. 복조기(120) 및 채널 디코더(130)는 원칩 상에 구현될 수도 있고, 튜너부(110), 복조기(120) 및 채널 디코더(130)이 모두 원칩상에 구현될 수도 있다.
방송 수신부(125)는 튜너부(110), 복조기(120) 및 채널 디코더(130)를 포함한다. 방송 수신부(125)는 안테나(101)로부터 수신된 고주파 신호(RF 신호)를 복조한다. 튜너부(110)는 안테나(101)로부터 수신된 고주파 신호(RF 신호)에 대하여 특정 방송 채널을 선국하고 필터링을 수행하여 기저 대역 신호로 변환한 후 복조기(120)으로 출력한다. 여기서, 방송 채널은 지상파 DMB 채널 또는 위성 DMB 채널, 유럽 방식인 DVB 채널 등이 될 수 있다.
튜너부(110)의 출력 신호는 복조기(120) 및 채널 디코더(130)을 거치면서 비디오 정보, 오디오 정보 및 방송 프로그램 정보 등의 각종 정보별로 복조(demodulation)되고 채널 디코딩된다. 비디오 정보는 MPEG4 (H.264) 또는 MPEG2 표준에 따라 부호화된 비디오 데이터가 될 수 있다. 오디오 정보는 AAC(Advanced Audio Coding) 또는 BSAC(Bit Sliced Audio Coding)에 따라 부호화된 오디오 데이터가 될 수 있다.
출력 제어 모듈(100)은 출력 제어부(150), 복호부(140) 및 출력부(160)를 포함한다. 출력부(160)는 비디오 출력부(162) 및 오디오 출력부(164)를 포함한다.
복호부(140)는 파서(parser, 141), 비디오 버퍼(143), 오디오 버퍼(145), 비디오 디코더(147), 오디오 디코더(149)를 포함한다. 파서(parser, 141)는 채널 디코더의 출력인 패킷 스트림 신호에 포함된 비디오 신호와 오디오 신호를 파싱하여 비디오 버퍼(143)와 오디오 버퍼(145)로 분리하여 각각 출력한다.
파싱된 비디오 신호는 비디오 버퍼(143)에 버퍼링된 후 비디오 디코더(147)에서 디코딩되고 비디오 출력부(752)로 제공되어 디스플레이부(17)의 디스플레이 영역에 표시된다. 디스플레이부(780)는 예를 들어 액정표시장치(LCD)가 될 수 있다. 파싱된 오디오 신호는 오디오 버퍼(145)에 버퍼링된 후 오디오 디코더(149)에서 디코딩되고 오디오 출력부(164)로 제공되어 디코딩된 오디오 신호가 소정의 타이밍에 사운드 출력부(180)를 통하여 출력된다. 사운드 출력부(180)는 예를 들어 스피커(182) 및 이어폰(184)를 포함할 수 있다. 채널 디코더(130)와 파서(141) 사 이에는 채널 디코더(130)의 출력인 패킷 스트림을 저장하는 채널 버퍼(미도시)를 더 포함할 수 있다.
출력 제어부(150)은 DMB 방송 수신 장치가 양호 지역에서 난청 지역으로 진입한 경우 고주파 신호의 강도를 검출하고, 상기 검출된 고주파 신호의 강도가 제1 기준치(TH1) 이하인 경우 오디오 신호의 크기(즉, 볼륨)를 단계적으로 감소시키도록 제어한다. 출력 제어부(150)은 고주파 신호의 강도가 소정의 제1 기준치 이하로 낮아진 것을 감지하여 오디오 버퍼(145)에 버퍼링된 정보(146)의 양에 기초하여 오디오 신호의 볼륨(volume)을 낮추도록 제어 신호(453)를 오디오 출력부(164)로 제공한다. 구체적으로, 도 2에 도시된 바와 같이, 출력 제어부(150)은 고주파 신호의 강도가 소정의 제1 기준치(TH1) 이하로 낮아진 시점(t0)부터 소정의 주기를 가진 제1 타이머를 작동시켜 타이머가 종료(expire)되는 시점마다 오디오 버퍼(145)에 버퍼링된 정보의 양에 비례하여 볼륨(volume)을 낮추도록 오디오 디코더(149)의 출력을 제어할 수 있다(T1 구간). 여기서, 고주파 신호의 강도는 안테나로부터 직접 수신된 고주파 신호(151)의 강도를 감지함으로써 검출될 수도 있고, 채널 디코더(130)의 출력 패킷 스트림 신호(131)의 헤더에 포함된 패킷량 정보를 이용하여 검출될 수도 있다.
DMB 방송 수신 장치가 난청 지역으로 진입한 경우 잡음의 원인이 될 개연성이 높은 마지막으로 들어온 패킷이 디코딩될 시점(t1)에는 볼륨이 0이거나 아주 낮은 값을 가지게 되어 잡음을 없애거나 줄일 수 있다. t1 시점이후 신호 미약 구간(구간 T2)에서는 디코딩할 패킷이 오디오 버퍼(149)에 쌓이지 않게 된다. 고주파 신호(151)의 강도가 제2 기준치(TH2) 이상으로 높아져 다시 오디오 버퍼(145)에 디코딩할 오디오 정보가 들어오기 시작하면 오디오 버퍼(145)에 디코딩해야할 정보가 증가한다.
출력 제어부(150)은 DMB 방송 수신 장치가 난청 지역에서 양호 지역으로 진입한 경우 고주파 신호의 강도를 검출하여, 상기 검출된 고주파 신호의 강도가 소정의 제2 기준치(TH2) 이상인 경우 오디오 신호의 크기를 단계적으로 증가시킨다. 출력 제어부(150)은 고주파 신호의 강도가 소정의 제2 기준치 이상으로 높아진 것을 감지하여 오디오 버퍼(145)에 버퍼링된 정보(146)의 양에 기초하여 오디오 신호의 볼륨(volume)을 높이도록 제어 신호(153)를 오디오 출력부(164)로 제공한다. 구체적으로, 도 2에 도시된 바와 같이, 출력 제어부(150)은 고주파 신호의 강도가 소정의 제2 기준치(TH2) 이상으로 높아진 시점(t2)부터 소정의 주기를 가진 제2 타이머를 작동시켜 타이머가 종료(expire)되는 시점마다 오디오 버퍼(145)에 버퍼링된 정보의 양에 비례하여 볼륨(volume)을 높이도록 오디오 디코더(149)의 출력을 제어할 수 있다(구간 T3). 여기서, 제1 기준치(TH1)와 제2 기준치(TH2)는 서로 동일한 값을 가질 수도 있고, 서로 다른 값을 가질 수도 있다. 제1 타이머와 제2 타이머는 서로 동일한 주기를 가질 수도 있고, 서로 다른 주기를 가질 수도 있다.
예를 들어, 오디오 신호의 볼륨(V)은 다음의 수학식 1로 산출될 수 있다.
Figure 112006033956871-pat00001
V = (1 + a × Vo ÷ Vmax) -1 (단, V > Vo 이면 V = Vo)
(여기서, V: 조절된 오디오 신호의 볼륨값, Vo: 사용자가 정한 볼륨값, Vmax: 최대 볼륨값, n: 현재 오디오 버퍼에 버퍼링된 정보량, a: 완충 상수)
난청 지역에서 양호 지역으로 진입하는 과정에서 끊어졌다가 다시 처음으로 들어온 디코딩할 패킷 주위에서 잡음의 원인이 있을 개연성이 크지만, 이 경우에는 오디오 신호의 볼륨이 0이거나 아주 낮은 값을 가지게 되어 잡음을 없애거나 줄일 수 있다. 그 후 오디오 버퍼(145)에 버퍼링된 정보량에 비례하여 볼륨이 증가하므로 원래 볼륨을 회복할 수 있다. 도 2에서는 오디오 신호의 볼륨을 자연스럽게 서서히 감소시키거나 서서히 증가시키는 것을 도시하였으나, 잡음 발생 가능 시점(t1, t2)에 오디오 신호의 출력을 막을 수도 있다.
또는, 출력 제어부(150)은 DMB 방송 수신 장치가 양호 지역에서 난청 지역으로 진입한 경우, 오디오 신호의 볼륨을 제어함과 동시에 또는 오디오 신호의 볼륨을 제어하는 것과 별도로, 고주파 신호의 강도를 검출하여 비디오 버퍼(145)에 버퍼링된 정보(144)의 양에 기초하여 제어 신호(153)를 비디오 출력부(162)로 제공하여 비디오 디코더(147)의 출력을 제어함으로써 비디오 신호의 출력을 제어할 수도 있다. 여기서, 상기 고주파 신호의 강도는 안테나로부터 수신된 고주파 신호(151)의 강도를 감지함으로써 검출될 수도 있고, 채널 디코더(130)의 출력 패킷 스트림 신호(131)의 헤더에 포함된 패킷량 정보를 이용하여 검출될 수도 있다.
도 1에는 도시하지 않았지만, DMB 방송 수신 장치는 채널 디코더(430)의 출력 신호를 디코딩하여 DAB 오디오 신호를 출력하기 위한 오디오 버퍼, 오디오 디코더 및 오디오 출력부로 구성된 DAB 디코딩 블록을 더 포함할 수 있다.
도 3은 본 발명의 일실시예에 따른 DMB 방송 수신 장치에서의 볼륨 제어 방 법을 설명하기 위한 순서도이다.
도 3을 참조하면, 본 발명의 일실시예에 따른 DMB 방송 수신 장치에서의 볼륨 제어 방법은 먼저 DMB 방송 수신 장치에서 고주파 신호(RF 신호)의 강도를 검출한다(단계 S301). 상기 고주파 신호의 강도는 안테나로부터 직접 수신된 고주파 신호의 강도를 감지함으로써 검출될 수도 있고, 안테나로부터 직접 수신된 고주파 신호가 복조기 및 채널 디코더를 통과한 후의 패킷 스트림 신호의 헤더에 포함된 패킷량 정보를 이용하여 검출될 수도 있다.
검출된 고주파 신호의 강도가 소정의 제1 기준치 이하인지 여부를 판단하여(단계 S303), 제1 기준치를 초과하는 경우에는 단계 S307을 수행하고, 제1 기준치 이하인 경우에는 DMB 방송 수신 장치로부터 출력되는 오디오 신호의 크기(또는 볼륨)을 단계적으로 감소시킨다(단계 S305). 일실시예에서는, 상기 고주파 신호를 기적 대역 신호로 변환하여 복조한 후 오디오 신호 성분을 파싱하여 오디오 버퍼에 버퍼링된 오디오 신호의 정보량에 기초하여 DMB 방송 수신 장치로부터 출력되는 오디오 신호의 크기(또는 볼륨)을 감소시킬 수 있다. 예를 들어, 오디오 버퍼에 버퍼링된 오디오 신호의 정보량에 비례하여 DMB 방송 수신 장치로부터 출력되는 오디오 신호의 볼륨을 감소시킬 수 있다. 또는, 제1 기준치 이하인 경우에는 상기 수신된 고주파 신호를 기적 대역 신호로 변환하여 복조한 후 비디오 신호 성분을 파싱하여 비디오 버퍼에 버퍼링된 비디오 신호의 정보량에 기초하여 DMB 방송 수신 장치로부터 출력되는 비디오 신호를 제어할 수도 있다.
검출된 고주파 신호의 강도가 소정의 제2 기준치 이상인지 여부를 판단하여 (단계 S307), 제2 기준치의 미만인 경우에는 단계 S301을 수행하고, 제2 기준치 이상인 경우에는 DMB 방송 수신 장치로부터 출력되는 오디오 신호의 크기(또는 볼륨)을 단계적으로 증가시킨다(단계 S309). 일실시예에서는, 상기 고주파 신호를 기적 대역 신호로 변환하여 복조한 후 오디오 신호 성분을 파싱하여 오디오 버퍼에 버퍼링된 오디오 신호의 정보량에 기초하여 DMB 방송 수신 장치로부터 출력되는 오디오 신호의 크기(또는 볼륨)을 증가시킬 수 있다. 예를 들어, 오디오 버퍼에 버퍼링된 오디오 신호의 정보량에 비례하여 DMB 방송 수신 장치로부터 출력되는 오디오 신호의 볼륨을 증가시킬 수 있다. 또는, 제2 기준치 이상인 경우에는 상기 수신된 고주파 신호를 기적 대역 신호로 변환하여 복조한 후 비디오 신호 성분을 파싱하여 비디오 버퍼에 버퍼링된 비디오 신호의 정보량에 기초하여 DMB 방송 수신 장치로부터 출력되는 비디오 신호를 제어할 수도 있다.
도 4는 본 발명의 다른 실시예에 따른 DAB 수신 장치를 개략적으로 나타낸 블록도이다.
도 4를 참조하면, 본 발명의 다른 실시예에 따른 DAB 방송 수신 장치는 안테나(401), 출력 제어 모듈(400) 및 사운드 출력부(480)를 포함한다.
방송 수신부(425)는 튜너부(410), 복조기(420) 및 채널 디코더(430)를 포함한다. 튜너부(410)는 안테나(401)로부터 수신된 고주파 신호(RF 신호)에 대하여 특정 방송 채널을 선국하고 필터링을 수행하여 기저 대역 신호로 변환한 후 복조기(420)으로 출력한다. 여기서, 방송 채널은 DAB 채널이 될 수 있다.
튜너부(410)의 출력 신호는 복조기(420) 및 채널 디코더(430)을 거치면서 복 조(demodulation)되고 채널 디코딩된다.
출력 제어 모듈(400)은 출력 제어부(450), 오디오 복호부(440) 및 오디오 출력부(464)를 포함한다. 오디오 복호부(440)는 오디오 버퍼(443) 및 오디오 디코더(449)를 포함한다.
채널 디코더(430)의 출력 오디오 신호는 오디오 버퍼(443)에 버퍼링된 후 오디오 디코더(449)에서 디코딩되고 오디오 출력부(464)로 제공되어 디코딩된 오디오 신호가 소정의 타이밍에 사운드 출력부(480)를 통하여 출력된다. 사운드 출력부(480)는 예를 들어 스피커(482) 및 이어폰(484)를 포함할 수 있다.
출력 제어부(450)은 DAB 방송 수신 장치가 양호 지역에서 난청 지역으로 진입한 경우 고주파 신호의 강도를 검출하고, 상기 검출된 고주파 신호의 강도가 제1 기준치(TH1) 이하인 경우 오디오 신호의 크기(즉, 볼륨)를 단계적으로 감소시키도록 제어한다. 출력 제어부(450)은 고주파 신호의 강도가 소정의 제1 기준치 이하로 낮아진 것을 감지하여 오디오 버퍼(443)에 버퍼링된 정보(444)의 양에 기초하여 오디오 신호의 볼륨(volume)을 낮추도록 제어 신호(453)를 오디오 출력부(464)로 제공한다. 구체적으로, 출력 제어부(450)은 고주파 신호의 강도가 소정의 제3 기준치 이하로 낮아진 시점부터 소정의 주기를 가진 제3 타이머를 작동시켜 타이머가 종료(expire)되는 시점마다 오디오 버퍼(443)에 버퍼링된 정보의 양에 비례하여 볼륨(volume)을 낮추도록 오디오 디코더(449)의 출력을 제어할 수 있다. 여기서, 고주파 신호의 강도는 안테나로부터 직접 수신된 고주파 신호(451)의 강도를 감지함으로써 검출될 수도 있고, 채널 디코더(430)의 출력 패킷 스트림 신호(431)의 헤더 에 포함된 패킷량 정보를 이용하여 검출될 수도 있다.
출력 제어부(450)은 DAB 방송 수신 장치가 난청 지역에서 양호 지역으로 진입한 경우 고주파 신호의 강도를 검출하여, 상기 검출된 고주파 신호의 강도가 소정의 제4 기준치 이상인 경우 오디오 신호의 크기를 단계적으로 증가시킨다. 출력 제어부(450)은 고주파 신호의 강도가 소정의 제4 기준치 이상으로 높아진 것을 감지하여 오디오 버퍼(443)에 버퍼링된 정보(444)의 양에 기초하여 오디오 신호의 볼륨(volume)을 높이도록 제어 신호(453)를 오디오 출력부(464)로 제공한다. 구체적으로, 출력 제어부(450)은 고주파 신호의 강도가 소정의 제4 기준치 이상으로 높아진 시점부터 소정의 주기를 가진 제4 타이머를 작동시켜 타이머가 종료되는 시점마다 오디오 버퍼(443)에 버퍼링된 정보의 양에 비례하여 오디오 신호의 볼륨을 높이도록 오디오 디코더(443)의 출력을 제어할 수 있다. 여기서, 제3 기준치와 제4 기준치는 서로 동일한 값을 가질 수도 있고, 서로 다른 값을 가질 수도 있다. 제3 타이머와 제4 타이머는 서로 동일한 주기를 가질 수도 있고, 서로 다른 주기를 가질 수도 있다.
도면에는 도시하지 않았지만, 본 발명의 일실시예에 따른 도 3의 DMB 방송 수신 장치에서의 볼륨 제어 방법은 DAB 방송 수신 장치에서의 볼륨을 제어할 경우에도 동일한 방식으로 적용할 수 있다.
이하, 본 발명의 일실시예에 따른 DMB 방송 수신 장치를 휴대용 단말기, 예를 들어 이동 통신 단말기에 적용한 경우를 도 9를 참조하여 설명한다.
도 5는 본 발명의 일실시예에 따른 DMB 방송 수신 장치를 가지는 이동 통신 단말기를 나타낸 블록도이다.
도 5를 참조하면, 이동 통신 단말기는 제어부(500), 키입력부(520), 디스플레이부(530), 방송 수신부(550), 송수신부(555), 착신음 발생부(560), 음성 처리부(565) 및 사운드 출력부(570)를 포함한다. 키입력부(520)는 단말기의 각종 기능 및 동작의 입력을 담당한다. 사운드 출력부(570)는 스피커(572) 및/또는 이어폰(574)을 포함한다. 사운드 출력부(570)는 도 1 및 도 4의 사운드 출력부(180, 480)과 동일한 구성을 가진다. 디스플레이부(530)는 예를 들어 액정표시장치 등과 같은 표시 장치이며, 도 1의 디스플레이부(170)과 동일한 구성을 가진다.
제어부(500)는 출력 제어 모듈(510)을 포함하며, 출력 제어 모듈(510)은 도 1 또는 도 4의 출력 제어 모듈(100, 400)과 동일한 구성을 갖는다. 제어부(410)는 송수신부(555) 및 방송 수신부(550)에서 처리된 신호를 입력받아 단말기의 각 구성요소들의 동작을 제어하며, 특히 출력 제어 모듈(510)은 도 1 및 도 3에서 전술한 바와 같이 수신된 방송 신호 중 오디오 신호의 볼륨을 제어한다.
방송 수신부(550)은 도 1의 튜너부(110), 복조기(120) 및 채널 디코더(130)을 포함하며, 안테나(552)를 통하여 지상파 DMB 신호, 위성 DMB 신호 및/또는 유럽 방식인 DVB 신호를 수신할 수 있다.
메모리(580)는 제어부(500)의 OS(Operating System) 프로그램 및 단말기 OS 프로그램 수행 중에 발생하는 데이터를 일시적으로 저장한다.
음성처리부(565)는 송수신부(555)로부터 입력된 음성 데이터 및 메모리(580)에 저장된 음성 데이터를 음성 신호로 복조하여 스피커(572) 또는 이어폰(574)를 통해 출력한다. 도면에는 도시되지 않았지만 출력 제어 모듈(510)에서 디코딩되어 볼륨이 제어된 오디오 신호는 스피커(572) 또는 이어폰(574)를 통해 출력된다.
착신음 발생부(560)는 제어부(500)의 제어를 받아 호(call) 착신시 착신 음원을 스피커(570)를 통해 출력하고, 통화 중에는 스피커(570)를 통하여 수화음을 발생한다.
송수신부(550)는 안테나(557)를 통하여 수신된 고주파(RF) 신호를 기저 대역 신호로 변환하고, 제어부(500)로부터 출력되는 기저 대역 신호를 고주파 신호로 변환하여 안테나(557)를 통해 출력한다.
도면에는 도시하지 않았지만, DAB 방송 수신 장치에서의 휴대용 단말기는 제어부(500)를 제외한 나머지 구성 요소는 도 5의 DMB 방송 수신 장치를 가지는 휴대용 단말기와 동일하다.
상기와 같은 방송 수신 장치 및 이를 가지는 휴대용 단말기에 따르면, 방송 수신 장치가 양호 지역에서 난청 지역으로 진입한 경우 검출된 고주파 신호의 강도가 소정의 제1 기준치 이하인 경우 오디오 신호 및/또는 비디오 신호의 크기를 단계적으로 감소시킨다. 또한, 방송 수신 장치가 난청 지역에서 양호 지역으로 진입한 경우 검출된 고주파 신호의 강도가 소정의 제2 기준치 이상인 경우 오디오 신호의 크기를 단계적으로 증가시킨다.
따라서, DMB 방송 수신기 및/또는 DAB 방송 수신기와 같은 방송 수신 장치 및 이를 가지는 휴대용 단말기가 이동 중의 방송 수신시 잡음을 제거 또는 완화하 여 출력함으로써 잡음의 영향을 줄일 수 있다. 그 결과, DMB 방송 수신기 또는 DAB 방송 수신기 및 이를 가지는 휴대용 단말기가 이동 중의 방송 수신시 음질을 개선할 수 있다.
이상 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

Claims (20)

  1. 수신된 고주파 신호를 복조하여 오디오 신호 및 비디오 신호 중의 적어도 하나로 분리하는 단계;
    상기 고주파 신호의 강도를 검출하는 단계; 및
    방송 수신 장치가 이동하여 상기 검출된 고주파 신호의 강도를 감소시키기 위한 제1 기준치 이하인 경우 상기 오디오 신호 및 비디오 신호 중 적어도 하나가 버퍼링된 버퍼의 정보량에 기초하여 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 감소시키는 단계를 포함하는 것을 특징으로 하는 방송 수신 장치의 방송 수신 방법.
  2. 삭제
  3. 제1항에 있어서, 상기 오디오 신호 및 비디오 신호 중 적어도 하나가 버퍼링된 버퍼의 정보량에 기초하여 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 감소시키는 단계는 상기 고주파 신호의 강도가 상기 제1 기준치 이하로 낮아진 시점부터 상기 버퍼에 버퍼링된 정보량에 실질적으로 비례하여 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 감소시키는 것을 특징으로 하는 방송 수신 장치의 방송 수신 방법.
  4. 삭제
  5. 제3항에 있어서,
    상기 고주파 신호의 강도가 상기 제1 기준치 이하로 낮아진 시점부터 소정 시간 후인 잡음 발생 가능 시점에 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 출력을 막는 것을 특징으로 하는 방송 수신 장치의 방송 수신 방법.
  6. 제1항에 있어서, 상기 방송 수신 장치가 이동하여 상기 검출된 고주파 신호의 강도가 상기 오디오 신호 및 비디오 신호 중 적어도 하나가 버퍼링된 버퍼의 정보량에 기초하여 상기 제1기준치보다 작은 제2 기준치 이상인 경우 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 증가시키는 단계를 더 포함하는 것을 특징으로 하는 방송 수신 장치의 방송 수신 방법.
  7. 제6항에 있어서, 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 증가시키는 단계는 상기 방송 수신 장치가 이동하여 상기 검출된 고주파 신호의 강도가 제2 기준치 이상인 경우 상기 오디오 신호 및 비디오 신호 중 적어도 하나가 버퍼링된 버퍼의 정보량에 기초하여 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 증가시키는 것을 특징으로 하는 방송 수신 장치의 방송 수신 방법.
  8. 삭제
  9. 제1항에 있어서, 상기 고주파 신호의 강도를 검출하는 단계는 안테나로부터 직접 수신된 고주파 신호의 강도를 감지함으로써 상기 고주파 신호의 강도를 검출하는 것을 특징으로 하는 방송 수신 장치의 방송 수신 방법.
  10. 제1항에 있어서, 상기 방송 수신 장치는 디지털 멀티미디어 방송 수신기인 것을 특징으로 하는 방송 수신 방법.
  11. 제1항에 있어서, 상기 방송 수신 장치는 디지털 오디오 방송 수신기인 것을 특징으로 하는 방송 수신 장치의 방송 수신 방법.
  12. 수신된 고주파 신호를 복조하는 방송 수신부;
    상기 복조된 신호로부터 오디오 신호 및 비디오 신호 중의 적어도 하나를 분리하는 복호부;
    상기 고주파 신호의 강도를 검출하고, 상기 검출된 고주파 신호의 강도를 증가시키기 위한 제1 기준치 이하인 경우 상기 오디오 신호 및 비디오 신호 중 적어도 하나가 버퍼링된 상기 버퍼의 정보량에 기초하여 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 감소시키도록 제어하는 출력 제어부를 포함하는 것을 특징으로 하는 방송 수신 장치.
  13. 제12항에 있어서, 상기 복호부는 상기 분리된 오디오 신호 및 비디오 신호 중의 적어도 하나를 버퍼링하는 버퍼를 포함하는 것을 특징으로 하는 방송 수신 장치.
  14. 제13항에 있어서, 상기 출력 제어부는 상기 고주파 신호의 강도가 상기 제1 기준치 이하로 낮아진 시점부터 상기 버퍼에 버퍼링된 정보량에 실질적으로 비례하여 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 감소시키는 것을 특징으로 하는 방송 수신 장치.
  15. 제12항에 있어서, 상기 출력 제어부는 상기 검출된 고주파 신호의 강도가 제2 기준치 이상인 경우 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 증가시키는 것을 특징으로 하는 방송 수신 장치.
  16. 제15항에 있어서, 상기 복호부는 상기 분리된 오디오 신호 및 비디오 신호 중의 적어도 하나를 버퍼링하는 버퍼를 포함하고,
    상기 출력 제어부는 상기 검출된 고주파 신호의 강도가 상기 제2 기준치 이상인 경우 상기 오디오 신호 및 비디오 신호 중 적어도 하나가 버퍼링된 상기 버퍼의 정보량에 기초하여 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 증가시키는 것을 특징으로 하는 방송 수신 장치.
  17. 제12항에 있어서, 상기 출력 제어부는 안테나로부터 직접 수신된 고주파 신호의 강도를 감지함으로써 상기 고주파 신호의 강도를 검출하는 것을 특징으로 하는 방송 수신 장치.
  18. 제12항에 있어서, 상기 방송 수신 장치는 디지털 멀티미디어 방송 수신기인 것을 특징으로 하는 방송 수신 장치.
  19. 수신된 고주파 신호를 복조하는 방송 수신부;
    상기 복조된 신호로부터 오디오 신호 및 비디오 신호 중의 적어도 하나를 분리하고, 상기 고주파 신호의 강도를 검출하고, 상기 검출된 고주파 신호의 강도를 증가시키기 위한 제1 기준치 이하인 경우 상기 오디오 신호 및 비디오 신호 중 적어도 하나가 버퍼링된 버퍼의 정보량에 기초하여 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 단계적으로 감소시키도록 제어하는 출력 제어 모듈;
    상기 오디오 신호를 출력하는 사운드 출력부; 및
    상기 비디오 신호를 출력하는 디스플레이부를 포함하는 것을 특징으로 하는 휴대용 단말기.
  20. 제19항에 있어서, 상기 출력 제어 모듈은 상기 분리된 오디오 신호 및 비디오 신호 중의 적어도 하나를 버퍼링하는 버퍼를 포함하고, 상기 오디오 신호 및 비디오 신호 중 적어도 하나가 버퍼링된 상기 버퍼의 정보량에 기초하여 상기 오디오 신호 및 비디오 신호 중의 적어도 하나의 크기를 감소시키는 것을 특징으로 하는 휴대용 단말기.
KR1020060043666A 2006-05-16 2006-05-16 방송 수신 방법, 방송 수신 장치 및 이를 가지는 휴대용단말기 KR100857720B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020060043666A KR100857720B1 (ko) 2006-05-16 2006-05-16 방송 수신 방법, 방송 수신 장치 및 이를 가지는 휴대용단말기

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020060043666A KR100857720B1 (ko) 2006-05-16 2006-05-16 방송 수신 방법, 방송 수신 장치 및 이를 가지는 휴대용단말기

Publications (2)

Publication Number Publication Date
KR20070110964A KR20070110964A (ko) 2007-11-21
KR100857720B1 true KR100857720B1 (ko) 2008-09-08

Family

ID=39089987

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060043666A KR100857720B1 (ko) 2006-05-16 2006-05-16 방송 수신 방법, 방송 수신 장치 및 이를 가지는 휴대용단말기

Country Status (1)

Country Link
KR (1) KR100857720B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030076453A (ko) * 2002-03-22 2003-09-26 가부시끼가이샤 도시바 방송 시스템과 그 방송 송신 장치 및 수신 단말 장치
KR20080007736A (ko) * 2006-07-18 2008-01-23 삼성전자주식회사 디지털 멀티미디어 방송의 송신방법 및 수신방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030076453A (ko) * 2002-03-22 2003-09-26 가부시끼가이샤 도시바 방송 시스템과 그 방송 송신 장치 및 수신 단말 장치
KR20080007736A (ko) * 2006-07-18 2008-01-23 삼성전자주식회사 디지털 멀티미디어 방송의 송신방법 및 수신방법

Also Published As

Publication number Publication date
KR20070110964A (ko) 2007-11-21

Similar Documents

Publication Publication Date Title
JP4370621B2 (ja) 通信端末装置、通信制御方法および通信制御プログラム
CN101014133B (zh) 提供数字多媒体广播辅助功能的装置和方法
KR100735327B1 (ko) 디지털 방송 수신 단말기의 배경 화면 디스플레이 방법
JP2004166173A (ja) 移動体用デジタル放送受信装置及びプログラム
WO2008056622A1 (en) Receiver
US7692727B2 (en) Channel switch control method in digital multimedia broadcasting receiver
JP5174623B2 (ja) 放送受信回路および放送受信装置
KR20130026650A (ko) 카 오디오 시스템 및 그의 제어방법
JP2006013646A (ja) 高周波信号受信装置
JP4333608B2 (ja) 移動体用デジタル放送受信装置
KR100857720B1 (ko) 방송 수신 방법, 방송 수신 장치 및 이를 가지는 휴대용단말기
KR100640374B1 (ko) 디지털 방송 데이터를 저장하는 디지털 방송 수신용 이동 통신 단말기
US20070042723A1 (en) Mobile terminal apparatus and broadcast receiving method
KR100785105B1 (ko) 디지털 멀티미디어 방송 수신을 위한 안테나 다이버시티장치 및 방법
JP2012156915A (ja) 放送受信機
JP2002354360A (ja) デジタル放送受信装置
KR100603507B1 (ko) 부가 데이터 출력기능을 갖는 디지털 멀티미디어 방송수신기
EP1727361A2 (en) Digital broadcasting reception terminal and method for processing digital broadcasting data using the same
KR101945742B1 (ko) 디지털 오디오 방송의 방송 데이터 연속 디코딩 출력 장치
KR100602497B1 (ko) Ｄｍｂ 수신기능을 갖는 휴대용 단말기 및 그 수신처리 방법
JP2012100008A (ja) 受信機
JP2006174030A (ja) 移動体用デジタル放送受信装置
KR200334049Y1 (ko) 부가 데이터 출력기능을 갖는 디지털 멀티미디어 방송수신기
KR20100044979A (ko) 디지털 고화질 방송 수신 시스템
JP2005026914A (ja) デジタル放送受信装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120831

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20130902

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee