KR101076229B1 - Multi function control method using one key operation for digital broadcasting receiver - Google Patents

Multi function control method using one key operation for digital broadcasting receiver Download PDF

Info

Publication number
KR101076229B1
KR101076229B1 KR1020040065009A KR20040065009A KR101076229B1 KR 101076229 B1 KR101076229 B1 KR 101076229B1 KR 1020040065009 A KR1020040065009 A KR 1020040065009A KR 20040065009 A KR20040065009 A KR 20040065009A KR 101076229 B1 KR101076229 B1 KR 101076229B1
Authority
KR
South Korea
Prior art keywords
key
audio
function
output
mute
Prior art date
Application number
KR1020040065009A
Other languages
Korean (ko)
Other versions
KR20060016524A (en
Inventor
오주석
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020040065009A priority Critical patent/KR101076229B1/en
Publication of KR20060016524A publication Critical patent/KR20060016524A/en
Application granted granted Critical
Publication of KR101076229B1 publication Critical patent/KR101076229B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4221—Dedicated function buttons, e.g. for the control of an EPG, subtitles, aspect ratio, picture-in-picture or teletext
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 디지털 방송 수신기의 오디오 뮤트 기능과 관련하여 연속적으로 수행이 요구되는 일련의 기능들을 사용자의 원키 조작에 의해 순차적으로 수행할 수 있도록 하는 디지털 방송 수신기의 원키 조작을 이용한 다중 기능 제어 방법을 제공한다. 이를 위해 본 발명은 비디오/오디오 출력 상태에서 입력 키에 따른 오디오 출력의 뮤트 기능을 수행하는 제 1단계와, 상기 오디오 출력 뮤트 기능의 수행 상태에서, 상기 키가 재입력되면 상기 뮤트되는 오디오 정보의 출력 내용에 대한 자막의 출력 기능을 수행하는 제 2단계 및, 상기 키가 또 재입력되면 상기 오디오 출력 뮤트 기능과 자막의 출력 기능을 해제시키는 제 3단계로 이루어진 것을 특징으로 한다.The present invention provides a multi-function control method using the one-key operation of the digital broadcast receiver to perform a series of functions that are required to be continuously performed in relation to the audio mute function of the digital broadcast receiver by the one-key operation of the user. do. To this end, the present invention provides a first step of performing a mute function of an audio output according to an input key in a video / audio output state, and when the key is input again in a state of performing the audio output mute function, And a second step of performing a subtitle output function for the output content, and a third step of releasing the audio output mute function and the subtitle output function when the key is input again.

오디오 출력, 뮤트, 토글, 자막Audio Out, Mute, Toggle, Subtitles

Description

디지털 방송 수신기의 원키 조작을 이용한 다중 기능 제어 방법{MULTI FUNCTION CONTROL METHOD USING ONE KEY OPERATION FOR DIGITAL BROADCASTING RECEIVER} MULTI FUNCTION CONTROL METHOD USING ONE KEY OPERATION FOR DIGITAL BROADCASTING RECEIVER}             

도 1은 본 발명의 일실시예에 따른 방법을 구현하기 위한 디지털 방송 수신기의 구성을 나타낸 도면, 1 is a diagram showing the configuration of a digital broadcast receiver for implementing a method according to an embodiment of the present invention;

도 2a 내지 도 2c는 본 발명의 바람직한 일실시예에 따라 순차적인 원키 조작에 의한 토글 기능에 의해 오디오 뮤트 기능 및 자막표시 기능이 구현되는 상태를 예시적으로 나타낸 도면, 2A to 2C are views exemplarily illustrating a state in which an audio mute function and a subtitle display function are implemented by a toggle function by sequential one-key operation according to an exemplary embodiment of the present invention;

도 3은 본 발명의 일실시예에 따른 디지털 방송 수신기의 원키 조작을 이용한 다중 기능 제어 방법의 동작을 설명하는 플로우차트, 3 is a flowchart illustrating an operation of a multi-function control method using one-key operation of a digital broadcast receiver according to an embodiment of the present invention;

도 4는 본 발명의 다른 실시예에 따른 방법을 구현하기 위한 디지털 방송 수신기와 외부 매체 재생기의 구성을 나타낸 도면, 4 is a diagram showing the configuration of a digital broadcast receiver and an external media player for implementing a method according to another embodiment of the present invention;

도 5a 내지 도 5c는 본 발명의 바람직한 다른 실시예에 따라 순차적인 원키 조작에 의한 토글 기능에 의해 오디오 뮤트 기능과 자막표시 기능 및 외부 매체 재생정지 기능이 순차적으로 수행되는 상태를 예시적으로 나타낸 도면, 5A to 5C are views exemplarily illustrating a state in which an audio mute function, a caption display function, and an external medium playback stop function are sequentially performed by a toggle function by sequential one-key operation according to another exemplary embodiment of the present invention. ,

도 6은 본 발명의 다른 실시예에 따른 디지털 방송 수신기의 원키 조작을 이 용한 다중 기능 제어 방법의 동작을 설명하는 플로우차트이다. 6 is a flowchart illustrating the operation of a multi-function control method using one-key operation of a digital broadcast receiver according to another embodiment of the present invention.

<도면의 주요부분에 대한 부호의 설명><Description of the symbols for the main parts of the drawings>

10:튜너, 12:디먹스,10: tuner, 12: demux,

14:비디오 버퍼, 16:오디오 버퍼,14: video buffer, 16: audio buffer,

18:데이터 버퍼, 20:비디오 디코더,18: data buffer, 20: video decoder,

22:오디오 디코더, 24:키입력부, 22: audio decoder, 24: key input,

26:메모리, 28:제어부, 26: memory, 28: control unit,

30:OSD신호 발생부, 32:비디오 합성부.

30: OSD signal generator, 32: video synthesizer.

본 발명은 디지털 방송 수신기의 원키 조작을 이용한 다중 기능 제어 방법에 관한 것으로서, 보다 상세하게는 디지털 방송 수신기에서 사용자에 의한 원키(One Key) 조작에 의해 일련의 동작 기능을 연속적으로 수행할 수 있도록 하는 디지털 방송 수신기의 원키 조작을 이용한 다중 기능 제어 방법에 관한 것이다.The present invention relates to a multi-function control method using one-key operation of a digital broadcast receiver, and more particularly, to enable a digital broadcast receiver to continuously perform a series of operating functions by one-key operation by a user. A multi-function control method using one-key operation of a digital broadcast receiver.

일반적으로, 디지털 텔레비전과 같은 디지털 방송 수신기에서는 디지털 방송을 수신받아 비디오/오디오 정보를 프리젠테이션 출력하기 위한 것으로서, 이러한 디지털 방송은 디지털 위성방송이나 디지털 케이블 방송, 디지털 지상파 방송으로 대별될 수 있으며, 이를 수신하기 위해 셋탑박스(Set Top Box)를 채용하여 MPEG 트랜스포트 스트림(Transport Stream)의 디지털 방송 신호를 원래의 비디오/오디오 신호로 복원한 다음에, 해당 디지털 텔레비전으로 전송하여 사용자가 원하는 방송채널의 방송 프로그램을 시청할 수 있도록 한다. In general, a digital broadcast receiver such as a digital television is used to receive digital broadcasts and output video / audio information for presentation. Such digital broadcasts can be roughly classified into digital satellite broadcasts, digital cable broadcasts, and digital terrestrial broadcasts. In order to receive a set top box, a set top box is used to restore the digital broadcast signal of the MPEG transport stream to the original video / audio signal, and then transmit the signal to the corresponding digital television. Allows you to watch broadcast programs.

또한, 이러한 디지털 텔레비전은 디지털 다기능 디스크(Digital Versatile Disc; 이하 "DVD"라 칭함)와 같은 비디오정보 기록매체에 수록된 비디오/오디오 정보를 수신받아 프리젠테이션하는 것이 가능하도록 하기 위해, DVD 플레이어를 연결하여 사용할 수 있도록 되어 있는 바, 이는 MPEG 데이터 포맷으로 수록된 DVD와 같은 비디오정보 기록매체에서 독출되는 MPEG 트랜스포트 스트림을 원래의 비디오/오디오 신호로 복원하여 해당 디지털 텔레비전으로 전송 출력할 수 있도록 되어 있 다. In addition, such a digital television may be connected to a DVD player in order to receive and present video / audio information contained in a video information recording medium such as a digital versatile disc (hereinafter referred to as "DVD"). It can be used to restore the MPEG transport stream read from video information recording media such as DVD in MPEG data format to the original video / audio signal for transmission and output to the corresponding digital television.

한편, 이러한 디지털 방송 수신기에서 디지털 방송이나 비디오정보 기록매체에 수록된 비디오/오디오 정보를 수신받아 프리젠테이션하는 상태에서, 주변의 사정에 의해서 오디오 출력을 줄여야 하는 경우에는 시청자의 키입력 조작에 뮤트(Mute) 기능이 수행되도록 하여 비디오 영상이 출력되는 상태에서 오디오 출력만 음소거되도록 하고 있다. On the other hand, when the digital broadcast receiver receives and presents video / audio information recorded in a digital broadcast or video information recording medium, and the audio output needs to be reduced due to circumstances, the viewer mutes the key input operation. ) So that only the audio output is muted while the video image is being output.

그러나, 이러한 디지털 방송 수신기의 뮤트 기능에 있어서는 시청자의 뮤트 키 조작에 의해 오디오 출력만을 소거하는 기능만을 제공하기 때문에, 복수의 시청자가 시청하는 상태에서는 음소거 기능이 필요한 시청자 이외에 다른 시청자가 오디오 출력을 듣지 못하게 되면서 디지털 방송이나 비디오정보 기록매체의 비디오/오디오 정보를 정상적으로 시청하는 것이 어렵게 되고, 오디오 출력 대신에 자막 출력 기능을 실행하고자 하는 경우에도 별도의 키입력을 재수행하여 다른 모드를 진행해야 하는 벌거로움이 있다.
However, the mute function of such a digital broadcast receiver provides only a function of canceling the audio output only by the viewer's mute key operation. This makes it difficult to normally watch the video / audio information of digital broadcasting or video information recording media, and to perform other modes by re-entering a separate key input even when a subtitle output function is executed instead of the audio output. There is this.

따라서, 본 발명은 상기한 종래의 사정을 감안하여 이루어진 것으로서, 그 목적은 디지털 방송 수신기의 오디오 뮤트 기능과 관련하여 연속적으로 수행이 요구되는 일련의 기능들을 사용자의 원키 조작에 의해 순차적으로 수행할 수 있도록 하는 디지털 방송 수신기의 원키 조작을 이용한 다중 기능 제어 방법을 제공하는 것이다.
Accordingly, the present invention has been made in view of the above-described conventional situation, and an object thereof is to sequentially perform a series of functions that are required to be continuously performed in connection with an audio mute function of a digital broadcasting receiver by one-key operation of a user. To provide a multi-function control method using one-key operation of a digital broadcast receiver.

상기한 목적을 달성하기 위해 본 발명에 따르면, 비디오/오디오 출력 상태에서 입력 키에 따른 오디오 출력의 뮤트 기능을 수행하는 제 1단계와, 상기 오디오 출력 뮤트 기능의 수행 상태에서, 상기 키가 재입력되면 상기 뮤트되는 오디오 정보의 출력 내용에 대한 자막의 출력 기능을 수행하는 제 2단계 및, 상기 키가 또 재입력되면 상기 오디오 출력 뮤트 기능과 자막의 출력 기능을 해제시키는 제 3단계로 이루어진 것을 특징으로 하는 디지털 방송 수신기의 원키 조작을 이용한 다중 기능 제어 방법을 제공한다.
According to the present invention for achieving the above object, a first step of performing a mute function of the audio output according to the input key in the video / audio output state, and in the state of performing the audio output mute function, the key is re-input And a third step of performing a function of outputting a subtitle for the output content of the muted audio information, and a third step of releasing the audio output mute function and the output function of the subtitle when the key is input again. A multi-function control method using one-key operation of a digital broadcast receiver is provided.

이하, 상기한 바와 같이 구성된 본 발명의 일실시예에 대해 첨부도면을 참조하여 상세히 설명한다.Hereinafter, an embodiment of the present invention configured as described above will be described in detail with reference to the accompanying drawings.

즉, 도 1은 본 발명의 일실시예에 따른 방법을 구현하기 위한 디지털 방송 수신기의 구성을 나타낸 도면이다. That is, FIG. 1 is a diagram illustrating a configuration of a digital broadcast receiver for implementing a method according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명의 방법에 따른 디지털 방송 수신기는, 튜너(10)와, 디먹스(12), 비디오 버퍼(14), 오디오 버퍼(16), 데이터 버퍼(18), 비디오 디코더(20), 오디오 디코더(22), 키입력부(24), 메모리(26), 제어부(28), OSD신호 발생부(30), 비디오 합성부(32)로 구성된다. As shown in FIG. 1, a digital broadcast receiver according to the method of the present invention includes a tuner 10, a demux 12, a video buffer 14, an audio buffer 16, a data buffer 18, and a video. The decoder 20, the audio decoder 22, the key input unit 24, the memory 26, the control unit 28, the OSD signal generator 30, and the video synthesizer 32 are provided.

상기 튜너(10)는 상기 제어부(28)로부터의 채널선국 명령에 따라 특정 방송 채널을 선국하여 해당 방송채널에 따른 디지털 텔레비전 방송 신호를 수신받기 위 한 것이고, 상기 디먹스(12)는 상기 튜너(10)를 통해 수신되는 디지털 방송 신호의 MPEG 트랜스포트 스트림을 비디오와 오디오 및 데이터 신호로 파싱(Parsing)하기 위한 것이다. The tuner 10 tunes a specific broadcast channel according to a channel tuning command from the control unit 28 to receive a digital television broadcast signal according to the corresponding broadcast channel, and the demux 12 receives the tuner ( Parsing the MPEG transport stream of the digital broadcast signal received through 10) into video, audio and data signals.

상기 비디오 버퍼(14)는 상기 디먹스(12)에서 파싱된 비디오 신호를 버퍼링하여 임시 저장하기 위한 것이며, 상기 오디오 버퍼(16)는 상기 디먹스(12)에서 파싱된 오디오 신호를 버퍼링하여 임시 저장하기 위한 것이고, 상기 데이터 버퍼(18)는 상기 디먹스(12)에서 파싱된 데이터 신호를 버퍼링하여 임시 저장하기 위한 것이다. The video buffer 14 buffers and temporarily stores the video signal parsed by the demux 12, and the audio buffer 16 buffers and temporarily stores the audio signal parsed by the demux 12. The data buffer 18 is for buffering and temporarily storing the data signal parsed by the demux 12.

상기 비디오 디코더(20)는 상기 비디오 버퍼(14)를 통한 비디오 신호를 디코딩하여 재생 출력이 가능한 원래의 비디오 신호로 복원하기 위한 것이고, 상기 오디오 디코더(22)는 상기 오디오 버퍼(16)를 통한 오디오 신호를 디코딩하여 재생 출력이 가능한 원래의 오디오 신호로 복원하기 위한 것이다. The video decoder 20 decodes the video signal through the video buffer 14 and restores the original video signal to be reproduced and output. The audio decoder 22 outputs audio through the audio buffer 16. It is to decode the signal and restore it to the original audio signal capable of reproduction output.

상기 키입력부(24)는 해당 디지털 텔레비전의 전반적인 기능에 대한 실행 명령을 입력하기 위한 다수의 기능키를 갖춘 것으로서, 이는 오디오 출력의 뮤트 기능과 그 뮤트 기능에 관련하여 기능선택이 예상되는 일련의 기능(즉, 자막출력 기능)의 조작이 연속적인 가능하도록 원키 조작에 의해 토글(Toggle) 방식으로 순차적으로 수행하는 다중모드 키(24a)와, 상기 다중모드 키(24a)의 조작상태를 도중에 해제하기 위한 다중모드 해제키(24b)를 포함하여 구성된다. The key input unit 24 has a plurality of function keys for inputting execution commands for the overall functions of the digital television, which is a series of functions in which a mute function of the audio output and a function selection are expected in relation to the mute function. (I.e., canceling the operation state of the multi-mode key 24a and the multi-mode key 24a sequentially in a toggle method by one-key operation so that the operation of the subtitle output function can be performed continuously. It is configured to include a multi-mode release key (24b) for.

상기 메모리(26)는 상기 키입력부(24)의 키입력 조작에 따른 뮤트 기능과, 그 뮤트기능과 관련된 일련의 기능으로서 자막출력 기능을 원키 조작에 의해 연속 적으로 수행되도록 제어하는 제어프로그램 데이터가 저장되어 있다. The memory 26 includes a mute function according to a key input operation of the key input unit 24, and control program data for controlling a subtitle output function to be continuously performed by one key operation as a series of functions related to the mute function. It is stored.

상기 제어부(28)는 상기 키입력부(24)의 다중모드 키(24a)가 최초로 원키 조작됨에 의해 상기 오디오 디코더(22)에 뮤트제어 신호를 출력하여 오디오 출력이 뮤트되도록 하고, 상기 다중모드 키(24b)가 재차 원키 조작되면 오디오 출력의 뮤트 기능이 그대로 유지되는 상태에서 상기 데이터 버퍼(18)로부터 추출되는 디지털 방송신호의 트랜스포트 스트림으로부터의 자막데이터가 디스플레이 화면 상에 출력되도록 제어한다. The controller 28 outputs a mute control signal to the audio decoder 22 when the multi-mode key 24a of the key input unit 24 is first-key operated so that the audio output is muted, and the multi-mode key ( If 24b) is operated again, the subtitle data from the transport stream of the digital broadcast signal extracted from the data buffer 18 is output on the display screen while the mute function of the audio output is maintained.

여기서, 상기 제어부(28)는 상기 키입력부(24)의 다중모드 키(24a)가 원키 조작되어 뮤트 기능이 제공되는 상태에서 다중모드 해제키(24b)가 키입력되면, 자막출력 기능을 진행하지 않고 곧바로 해당 뮤트기능을 해제하게 된다. Here, the control unit 28 does not proceed with the subtitle output function when the multi-mode release key 24b is keyed in a state in which the multi-mode key 24a of the key input unit 24 is one-key operated and a mute function is provided. The mute function will be canceled immediately.

상기 OSD신호 발생부(30)는 뮤트기능의 실행 상태에 대한 OSD 캐릭터 신호를 발생하게 되고, 자막출력 기능에 따라 디지털 방송신호로부터 추출한 자막데이터를 OSD 신호로 출력하게 되고, 상기 비디오 합성부(32)는 상기 비디오 디코더(20)로부터의 비디오 신호와 상기 OSD신호 발생부(30)로부터의 OSD 신호를 합성하여 디스플레이 화면 상에 표시 가능하게 출력하게 된다. The OSD signal generator 30 generates an OSD character signal for the execution state of the mute function, and outputs the caption data extracted from the digital broadcast signal as an OSD signal according to the caption output function. The video synthesizer 32 ) Synthesizes the video signal from the video decoder 20 and the OSD signal from the OSD signal generator 30 so as to be displayed on a display screen.

여기서, 상기 OSD신호 발생부(30)는 상기 키입력부(24)의 다중모드 키(24a)가 원키 조작되면, 도 2a에 도시된 바와 같이 디스플레이 화면의 일측에 뮤트기능의 실행 상태를 표시하기 위한 뮤트표시 캐릭터(40)가 표시되도록 하고, 상기 다중모드 키(24a)가 재차 원키 조작됨에 의해 자막출력 기능이 실행되면, 도 2b에 도시된 바와 같이 디스플레이 화면 상에 뮤트표시 캐릭터(40)가 그대로 표시되는 상태 에서 자막화면(42)이 표시되도록 한다. Here, the OSD signal generator 30 is for displaying the execution state of the mute function on one side of the display screen when the multi-mode key 24a of the key input unit 24 is operated by one key. When the mute display character 40 is displayed and the caption output function is executed by the one-key operation of the multi-mode key 24a again, the mute display character 40 remains on the display screen as shown in FIG. 2B. The subtitle screen 42 is displayed in the displayed state.

한편, 상기 OSD신호 발생부(30)는 상기 키입력부(24)의 다중모드 키(24a)가 재차 원키 조작되어 자막출력 기능이 진행되더라도 디지털 방송신호에 자막데이터가 포함되어 있지 않은 경우에, 도 2c에 도시된 바와 같이 예컨대 "자막기능을 제공하지 못합니다"와 같은 자막 미출력 통보 메시지(44)를 화면 표시하도록 한다.
On the other hand, the OSD signal generator 30 is a case where the subtitle data is not included in the digital broadcast signal even if the multi-mode key 24a of the key input unit 24 is operated again and the caption output function is performed. As shown in 2c, the subtitle non-printing notification message 44 is displayed on the screen, for example, "the subtitle function cannot be provided."

이어, 상기한 바와 같이 이루어진 본 발명의 일실시예에 따른 동작에 대해 도 3의 플로우차트를 참조하여 상세히 설명한다. Next, an operation according to an embodiment of the present invention made as described above will be described in detail with reference to the flowchart of FIG. 3.

먼저, 튜너(10)에 의해 특정 방송채널의 디지털 방송신호가 선국되어 비디오/오디오 디코더(20,22)를 통한 디코딩 처리에 의해 디스플레이 화면 및 스피커를 통해 비디오/오디오 출력되고 있는 상태에서(단계 S10), 제어부(28)는 키입력부(24)의 다중모드 키(24a)가 최초로 원키 조작됨에 의해 뮤트 기능이 진행되는 지의 여부를 판단한다(단계 S11).First, a digital broadcast signal of a specific broadcast channel is tuned by the tuner 10, and video / audio is output through a display screen and a speaker by decoding processing through the video / audio decoders 20 and 22 (step S10). ), The control unit 28 determines whether the mute function is progressed by the first one-key operation of the multi-mode key 24a of the key input unit 24 (step S11).

상기 판단 결과, 상기 제어부(28)는 상기 키입력부(24)의 다중모드 키(24a)가 최초로 원키 조작되는 것으로 판단되면, 오디오 디코더(22)에 뮤트제어 신호를 출력하여 오디오신호의 출력을 뮤트시키도록 한다(단계 S12).As a result of the determination, if it is determined that the multi-mode key 24a of the key input unit 24 is the one-key operation for the first time, the control unit 28 outputs a mute control signal to the audio decoder 22 to mute the output of the audio signal. (Step S12).

그 상태에서, 상기 제어부(28)는 상기 키입력부(24)의 다중모드 키(24a)가 토글 방식으로 재차 원키 조작되는 지의 여부를 판단한다(단계 S13).In this state, the control section 28 determines whether or not the multi-mode key 24a of the key input section 24 is operated once again by the toggle method (step S13).

상기 판단 결과, 상기 제어부(28)는 상기 키입력부(24)의 다중모드 키(24a)가 토글 방식으로 재차 원키 조작되고 있다고 판단되면, 데이터 버퍼(18)로부터 방 송신호의 트랜스포트 스트림에 포함된 자막데이터가 존재하는 지의 여부를 판단한다(단계 S14).As a result of the determination, when the controller 28 determines that the multi-mode key 24a of the key input unit 24 is being operated once again by a toggle method, the controller 28 is included in the transport stream of the transmission call from the data buffer 18. It is determined whether or not the caption data exists (step S14).

상기 판단 결과, 상기 방송신호의 트랜스포트 스트림에 해당 방송 프로그램에 대한 자막데이터가 존재하지 않는다고 판단하게 되면, 상기 제어부(28)는 OSD신호 발생부(30)를 통해서 디스플레이 화면 상에 자막 불출력을 통보하는 메시지가 표시되도록 한다(단계 S15).As a result of the determination, when it is determined that the subtitle data for the broadcast program does not exist in the transport stream of the broadcast signal, the control unit 28 outputs a subtitle non-output on the display screen through the OSD signal generation unit 30. The notification message is displayed (step S15).

하지만, 상기 단계 S14의 판단 결과에 따라 상기 제어부(28)는 상기 자막데이터가 존재한다고 판단되면, 해당 자막데이터가 OSD신호 발생부(30)에 의해 OSD 자막신호의 형태로 발생되어 디스플레이 화면 상에 자막이 출력되도록 한다(단계 S16).However, when the control unit 28 determines that the caption data exists according to the determination result of step S14, the caption data is generated by the OSD signal generation unit 30 in the form of an OSD caption signal and displayed on the display screen. Subtitles are output (step S16).

한편, 상기 제어부(28)는 상기 디스플레이 화면 상에 자막이 출력되는 상태에서, 상기 다중모드 키(24a)를 다시 한번 원키 조작하여 뮤트를 해제하고자 하는 지의 여부를 판단하거나(단계 S17), 상기 단계 S13의 판단 결과에 따라 상기 키입력부(24)의 다중모드 키(24a)가 재차 원키 조작되지 않음에 따라 다중모드 해제키(24b)가 키조작되는 지의 여부를 판단하게 된다(단계 S18).On the other hand, the control unit 28 determines whether or not to release the mute by one-key operation on the multi-mode key 24a once again with the caption output on the display screen (step S17), or the step According to the determination result of S13, it is determined whether or not the multi-mode release key 24b is key operated as the multi-mode key 24a of the key input unit 24 is not operated again.

상기 단계 S17 또는 단계 S18의 판단 결과에 따라, 상기 제어부(28)는 뮤트 기능을 해제하기 위한 키입력 조작이 이루어지고 있다고 판단되면, 오디오 출력의 뮤트 상태를 해제함과 더불어, 자막이 출력되어 있는 상태이면 자막출력을 중지하고, 정상적인 디지털 방송의 비디오/오디오 출력이 이루어지도록 한다(단계 S19).
According to the determination result of the step S17 or step S18, if it is determined that the key input operation for canceling the mute function is performed, the control unit 28 releases the mute state of the audio output and outputs a subtitle. If so, the subtitle output is stopped, and video / audio output of a normal digital broadcast is made (step S19).

다음에, 첨부도면을 참조하여 본 발명의 다른 실시예에 대해 상세히 설명한다. Next, another embodiment of the present invention will be described in detail with reference to the accompanying drawings.

즉, 도 4는 본 발명의 다른 실시예에 따른 방법을 구현하기 위한 디지털 방송 수신기와 외부 매체 재생기의 구성을 나타낸 도면으로서, 동 도면에서 본 발명의 일실시예에 다른 도 1의 구성요소와 유사한 구성요소에 대해서는 동일한 참조부호를 부여하면서, 그에 대한 상세한 설명은 생략하기로 한다. That is, FIG. 4 is a diagram showing the configuration of a digital broadcast receiver and an external media player for implementing a method according to another embodiment of the present invention, which is similar to the components of FIG. The same reference numerals are used for the components, and detailed description thereof will be omitted.

도 4에 도시된 바와 같이, 본 발명의 방법에 따른 디지털 방송 수신기는, 튜너(10)와, 디먹스(12), 비디오 버퍼(14), 오디오 버퍼(16), 데이터 버퍼(18), 비디오 디코더(20), 오디오 디코더(22), 키입력부(24), 메모리(26), 제어부(28), OSD신호 발생부(30), 비디오 합성부(32), 모드 스위칭부(34)로 구성되고, 상기 디지털 방송 수신기와 연결되어 있는 외부 매체 재생기는 외부 매체 신호 처리부(50)와, 매체신호 출력부(52), 외부장치 제어부(54)로 구성된다. As shown in FIG. 4, the digital broadcast receiver according to the method of the present invention includes a tuner 10, a demux 12, a video buffer 14, an audio buffer 16, a data buffer 18, and a video. Decoder 20, audio decoder 22, key input unit 24, memory 26, control unit 28, OSD signal generator 30, video synthesizer 32, mode switching unit 34 The external media player connected to the digital broadcast receiver includes an external media signal processor 50, a media signal output unit 52, and an external device controller 54.

상기 디지털 방송 수신기의 모드 스위칭부(34)는 상기 외부 매체 재생기의 매체신호 출력부(52) 및 튜너(10)와 각각 연결되고서, 방송출력 모드 또는 외부매체 재생모드에 따른 모드 스위칭에 의해, 튜너(10)에서 선국되는 방송신호 또는 외부 매체로부터 독출되는 비디오/오디오 신호를 상기 디먹스(12)에 제공한다. The mode switching unit 34 of the digital broadcast receiver is connected to the media signal output unit 52 and the tuner 10 of the external media player, respectively, by mode switching according to a broadcast output mode or an external medium playback mode. The demux 12 is provided with a broadcast signal tuned by the tuner 10 or a video / audio signal read from an external medium.

상기 디지털 방송 수신기의 제어부(28)는 상기 외부 매체 재생기의 외부장치 제어부(54)와 제어신호용 케이블을 통해 연결되고서, 상기 키입력부(24)의 다중모드 키(24a)가 토글 방식으로 3회째 원키 조작됨에 따라 외부 매체 재생기의 매체재생 정지 기능이 진행되면, 상기 외부장치 제어부(54)에 외부 매체의 재생정지 명령 신호를 출력한다. The control unit 28 of the digital broadcast receiver is connected to the external device control unit 54 of the external media player via a control signal cable, and the multi-mode key 24a of the key input unit 24 is toggled three times. When the media playback stop function of the external media player progresses as the one key is operated, the external device controller 54 outputs a playback stop command signal for the external media.

상기 키입력부(24)의 다중모드 키(24a)는 오디오 출력의 뮤트 기능과 그 뮤트 기능에 관련하여 기능선택이 예상되는 일련의 기능(즉, 자막출력 기능과 외부 매체 재생정지 기능)의 조작이 연속적인 가능하도록 원키 조작에 의해 토글(Toggle) 방식으로 순차적으로 수행하게 된다. The multi-mode key 24a of the key input unit 24 operates a mute function of the audio output and a series of functions (ie, a subtitle output function and an external media playback stop function) in which a function selection is expected in relation to the mute function. It is performed sequentially in a toggle method by one-key operation so as to be continuous.

상기 OSD신호 발생부(30)는 상기 키입력부(24)의 다중모드 키(24a)가 원키 조작되면, 도 5a에 도시된 바와 같이 디스플레이 화면의 일측에 뮤트기능의 실행 상태를 표시하기 위한 뮤트표시 캐릭터(56)가 표시되도록 하고, 상기 다중모드 키(24a)가 재차 원키 조작됨에 의해 자막출력 기능이 실행되면, 도 5b에 도시된 바와 같이 디스플레이 화면 상에 뮤트표시 캐릭터(56)가 그대로 표시되는 상태에서 자막화면(58)이 표시되도록 하게 되며, 상기 다중모드 키(24a)가 3회째 연속적으로 원키 조작되면 도 5c에 도시된 바와 같이, 예컨대 "외부 매체 재생정지"와 같이 외부 매체가 재생 정지되었음을 통보하는 메시지(60)가 화면표시되도록 한다. When the multi-mode key 24a of the key input unit 24 is one-key operated, the OSD signal generator 30 displays a mute for displaying the execution state of the mute function on one side of the display screen as shown in FIG. 5A. When the character 56 is displayed and the caption output function is executed by the one-key operation of the multi-mode key 24a again, the mute display character 56 is displayed on the display screen as shown in FIG. 5B. In this state, the caption screen 58 is displayed, and when the multi-mode key 24a is one-times consecutively operated for the third time, as shown in Fig. 5C, the external medium stops playing, for example, "external medium playback stop". A message 60 notifying that the message has been displayed is displayed on the screen.

상기 외부 매체 재생기의 외부 매체 신호 처리부(50)는 예컨대 DVD와 같은 외부 매체에 수록된 비디오/오디오 정보를 재생이 가능하게 신호 처리하게 되고, 상기 매체신호 출력부(52)는 비디오/오디오 케이블을 통해서 상기 모드 스위칭부(34)와 연결되고서, 상기 외부 매체 신호 처리부(50)로부터의 비디오/오디오 신호를 상기 모드 스위칭부(34) 측으로 출력한다. The external media signal processor 50 of the external media player enables signal processing of video / audio information recorded on an external medium such as a DVD, for example, and the media signal output unit 52 is connected to a video / audio cable. It is connected to the mode switching unit 34 and outputs a video / audio signal from the external media signal processing unit 50 to the mode switching unit 34.

상기 외부장치 제어부(54)는 상기 디지털 방송 수신기의 제어부(28)와 제어신호용 케이블을 통해 연결되고서, 상기 제어부(28)의 다중모드 수행에 다른 외부 매체 재생정지 명령에 따라 외부 매체의 재생을 정지시키게 된다.
The external device control unit 54 is connected to the control unit 28 of the digital broadcast receiver through a cable for a control signal, and the external device control unit 54 performs reproduction of the external medium according to another external medium playback stop command to perform the multi-mode operation of the control unit 28. Stopped.

이어, 상기한 바와 같이 이루어진 본 발명의 다른 실시예에 따른 동작에 대해 도 6의 플로우차트를 참조하여 상세히 설명한다. Next, an operation according to another embodiment of the present invention made as described above will be described in detail with reference to the flowchart of FIG. 6.

먼저, 모드 스위칭부(34)의 외부매체 재생모드로의 모드절환에 따른 스위칭에 의해, 외부 매체 재생기로부터의 비디오/오디오 신호가 비디오/오디오 디코더(20,22)를 통한 디코딩 처리에 의해 디스플레이 화면 및 스피커를 통해 비디오/오디오 출력되고 있는 상태에서(단계 S30), 제어부(28)는 키입력부(24)의 다중모드 키(24a)가 최초로 원키 조작됨에 의해 뮤트 기능이 진행되는 지의 여부를 판단한다(단계 S31).First, by switching according to the mode switching of the mode switching unit 34 to the external medium playback mode, the video / audio signal from the external medium player is displayed on the display screen by decoding processing through the video / audio decoders 20 and 22. And in the state of outputting video / audio through the speaker (step S30), the controller 28 determines whether the mute function is progressed by one-key operation of the multi-mode key 24a of the key input unit 24 for the first time. (Step S31).

상기 판단 결과, 상기 제어부(28)는 상기 키입력부(24)의 다중모드 키(24a)가 최초로 원키 조작되는 것으로 판단되면, 오디오 디코더(22)에 뮤트제어 신호를 출력하여 오디오신호의 출력을 뮤트시키도록 한다(단계 S32).As a result of the determination, if it is determined that the multi-mode key 24a of the key input unit 24 is the one-key operation for the first time, the control unit 28 outputs a mute control signal to the audio decoder 22 to mute the output of the audio signal. (Step S32).

그 상태에서, 상기 제어부(28)는 상기 키입력부(24)의 다중모드 키(24a)가 제 1토글 조작에 의해 원키 조작되는 지의 여부를 판단한다(단계 S33).In this state, the control unit 28 determines whether the multi-mode key 24a of the key input unit 24 is one-key operated by the first toggle operation (step S33).

상기 판단 결과, 상기 제어부(28)는 상기 키입력부(24)의 다중모드 키(24a)가 제 1토글 조작에 의해 원키 조작되고 있다고 판단되면, 데이터 버퍼(18)로부터 비디오 신호의 트랜스포트 스트림에 포함된 자막데이터가 존재하는 지의 여부를 판단한다(단계 S34).As a result of the determination, when the controller 28 determines that the multi-mode key 24a of the key input unit 24 is the one-key operation by the first toggle operation, the control unit 28 transfers the data stream from the data buffer 18 to the transport stream of the video signal. It is determined whether or not the included caption data exists (step S34).

상기 판단 결과, 상기 외부 매체의 비디오 신호에 따른 트랜스포트 스트림에 자막데이터가 존재하지 않는다고 판단하게 되면, 상기 제어부(28)는 OSD신호 발생부(30)를 통해서 디스플레이 화면 상에 자막 불출력을 통보하는 메시지가 표시되도록 한다(단계 S35).As a result of the determination, when it is determined that the subtitle data does not exist in the transport stream according to the video signal of the external medium, the controller 28 notifies the subtitle non-output on the display screen through the OSD signal generator 30. Message is displayed (step S35).

하지만, 상기 단계 S34의 판단 결과에 따라 상기 제어부(28)는 상기 자막데이터가 존재한다고 판단되면, 해당 자막데이터가 OSD신호 발생부(30)에 의해 OSD 자막신호의 형태로 발생되어 디스플레이 화면 상에 자막이 출력되도록 한다(단계 S36).However, if it is determined that the caption data exists in accordance with the determination result of step S34, the caption data is generated by the OSD signal generator 30 in the form of an OSD caption signal and displayed on the display screen. Subtitles are output (step S36).

그 다음에, 상기 제어부(28)는 상기 키입력부(24)의 다중모드 키(24a)가 제 2토글 조작에 의해 원키 조작되는 지의 여부를 판단한다(단계 S37).Then, the control section 28 determines whether the multi-mode key 24a of the key input section 24 is one-key operation by the second toggle operation (step S37).

상기 판단 결과, 상기 제어부(28)는 상기 키입력부(24)의 다중모드 키(24a)가 제 2토글 조작에 의해 원키 조작되고 있다고 판단되면, 상기 외부매체 재생기의 외부장치 제어부(54)에 외부 매체의 재생정지 명령 신호를 출력하게 되고, 상기 외부장치 제어부(54)는 상기 제어부(28)로부터의 외부매체 재생정지 명령에 따라 외부매체의 재생을 정지시키게 된다(단계 S38).As a result of the determination, when it is determined that the multi-mode key 24a of the key input unit 24 is the one-key operation by the second toggle operation, the controller 28 is external to the external device controller 54 of the external medium player. The reproduction stop command signal of the medium is output, and the external device control unit 54 stops the reproduction of the external medium according to the external medium reproduction stop command from the control unit 28 (step S38).

한편, 상기 제어부(28)는 상기 외부 매체의 재생이 정지되어 있는 상태에서, 상기 다중모드 키(24b)를 다시 한번 원키 조작하여 뮤트를 해제하고자 하는 지의 여부를 판단하거나(단계 S39), 상기 단계 S33의 판단 결과에 따라 상기 키입력부(24)의 다중모드 키(24a)가 재차 원키 조작되지 않음에 따라 다중모드 해제키(24b)가 키조작되는 지의 여부를 판단하게 되고(단계 S40), 또는 상기 디스플레이 화면 상에 자막이 출력되는 상태에서, 상기 다중모드 해제키(24b)가 키조작되 는 지의 여부를 판단하게 된다(단계 S41).On the other hand, the control unit 28 determines whether or not to mute the multi-mode key 24b by one-key operation once again while the reproduction of the external medium is stopped (step S39), or the step According to the result of the determination in S33, the multi-mode key 24a of the key input unit 24 is not operated again, so that it is determined whether the multi-mode release key 24b is key operated (step S40), or In the state where the subtitle is output on the display screen, it is determined whether the multi-mode release key 24b is key operated (step S41).

상기 단계 S39나 단계 S40 또는 단계 S41의 판단 결과에 따라, 상기 제어부(28)는 뮤트 기능을 해제하기 위한 키입력 조작이 이루어지고 있다고 판단되면, 오디오 출력의 뮤트 상태를 해제함과 더불어, 자막이 출력되어 있는 상태이면 자막출력을 중지하고, 상기 외부장치 제어부(54)에 외부 매체의 재생동작이 재개되도록 함으로써, 정상적인 외부 매체로부터의 비디오/오디오 출력이 이루어지도록 한다(단계 S42).According to the determination result of the step S39, the step S40 or the step S41, if it is determined that the key input operation for releasing the mute function is performed, the control unit 28 cancels the mute state of the audio output and the subtitles. If it is in the output state, the caption output is stopped and the external device control unit 54 resumes the playback operation of the external medium, so that video / audio output from the normal external medium is made (step S42).

한편, 본 발명은 전술한 전형적인 바람직한 실시예들에만 한정되는 것이 아니라 본 발명의 요지를 벗어나지 않는 범위 내에서 여러 가지로 개량, 변경, 대체 또는 부가하여 실시할 수 있는 것임은 당해 기술분야에 통상의 지식을 가진 자라면 용이하게 이해할 수 있을 것이다. 이러한 개량, 변경, 대체 또는 부가에 의한 실시가 이하의 첨부된 특허청구범위의 범주에 속하는 것이라면 그 기술사상 역시 본 발명에 속하는 것으로 보아야 한다.
On the other hand, the present invention is not limited to the above-described typical preferred embodiments, but can be carried out in various ways without departing from the gist of the present invention, various modifications, alterations, substitutions or additions are common in the art Those who have knowledge will easily understand. If the implementation by such improvement, change, replacement or addition falls within the scope of the appended claims, the technical idea should also be regarded as belonging to the present invention.

이상과 같이 본 발명에 따르면, 디지털 방송 수신기의 키입력부에 구비된 단일의 기능키를 연속적으로 원키 조작하는 것에 의해 오디오 출력의 뮤트 기능과, 그 뮤트 기능과 관련된 자막 출력기능이나 외부 매체 재생정지 기능의 일련의 기능이 연속적으로 수행되는 것이 가능하도록 함에 따라, 단일한 기능키를 연속적으로 토글 조작하는 것 만으로 시청자가 원하는 일련의 기능을 연속적으로 수행할 수 있 게 된다는 효과를 갖게 된다. According to the present invention as described above, by continuously one-key operation of a single function key provided in the key input unit of the digital broadcast receiver, the mute function of the audio output, the subtitle output function and the external media playback stop function associated with the mute function As it is possible to continuously perform a series of functions, the viewer has the effect of being able to continuously perform a desired series of functions only by continuously toggling a single function key.

Claims (2)

외부 매체 재생기로부터 수신되는 오디오 및 비디오를 출력하던 도중 특정 키가 입력되면, 오디오 뮤트를 수행하는 1단계;Performing audio muting when a specific key is input while outputting audio and video received from an external media player; 상기 오디오 뮤트 도중, 상기 특정 키가 입력되면, 상기 오디오 뮤트 상태에서, 상기 오디오에 대응되는 자막 출력을 수행하는 2단계; Performing a subtitle output corresponding to the audio in the audio mute state when the specific key is input during the audio mute; 상기 자막 출력 도중, 상기 특정 키가 입력되면, 상기 외부 매체 재생기를 동작 제어하여, 재생 중지를 수행하는 3단계; 및 In response to the specific key being input during the caption output, controlling the external media player to stop playback; And 상기 재생 중지 도중, 상기 특정 키가 입력되면, 상기 외부 매체 재생기를 동작 제어하여, 재생 재개를 수행함과 아울러, 상기 외부 매체 재생기로부터 수신되는 오디오 및 비디오를 출력하는 4단계를 포함하여 이루어지는 것을 특징으로 하는 디지털 방송 수신기의 원키 조작을 이용한 다중 기능 제어 방법. In the middle of the reproduction stop, if the particular key is input, the operation of the external medium player is controlled, the playback is resumed, and the audio and video received from the external medium player is included. Multi-function control method using one-key operation of a digital broadcast receiver. 제 1 항에 있어서, The method of claim 1, 상기 2단계는, 상기 오디오 뮤트 도중, 상기 특정 키가 입력되면, 상기 오디오 뮤트 상태에서, 상기 오디오에 대응되는 자막 출력을 수행하되, 상기 오디오에 대응되는 자막이 없으면, 자막 출력 불가능을 알리는 안내 메시지를 출력하는 것을 특징으로 하는 디지털 방송 수신기의 원키 조작을 이용한 다중 기능 제어 방법. In the second step, when the specific key is input during the audio muting, the subtitle output message may be output in the audio mute state. Multi-function control method using the one-key operation of the digital broadcast receiver, characterized in that for outputting.
KR1020040065009A 2004-08-18 2004-08-18 Multi function control method using one key operation for digital broadcasting receiver KR101076229B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040065009A KR101076229B1 (en) 2004-08-18 2004-08-18 Multi function control method using one key operation for digital broadcasting receiver

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040065009A KR101076229B1 (en) 2004-08-18 2004-08-18 Multi function control method using one key operation for digital broadcasting receiver

Publications (2)

Publication Number Publication Date
KR20060016524A KR20060016524A (en) 2006-02-22
KR101076229B1 true KR101076229B1 (en) 2011-10-26

Family

ID=37124801

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040065009A KR101076229B1 (en) 2004-08-18 2004-08-18 Multi function control method using one key operation for digital broadcasting receiver

Country Status (1)

Country Link
KR (1) KR101076229B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108882051B (en) * 2017-05-15 2021-07-23 北京嘀嘀无限科技发展有限公司 Method and device for acquiring plug-in subtitle

Also Published As

Publication number Publication date
KR20060016524A (en) 2006-02-22

Similar Documents

Publication Publication Date Title
JP5222543B2 (en) Television equipment
JP2007281537A (en) Video recording/reproducing device, and television receiver including the same
JP4250646B2 (en) Broadcast receiving apparatus, control method of broadcast receiving apparatus, and program
KR20090059281A (en) The image device of processing a plurality of images and the method thereof
JP4640046B2 (en) Digital content playback device
KR100763385B1 (en) Method and apparatus of outputting broadcasting signal
JP4287238B2 (en) Video reception and recording device
KR20090005619A (en) Method and apparatus for channel change in a digital broadcasting receiver
JP4103146B2 (en) Digital broadcast receiver
KR101076229B1 (en) Multi function control method using one key operation for digital broadcasting receiver
JP5111134B2 (en) Recording / playback device
JP2006165772A (en) Information reproducing apparatus and method therefor
KR100854824B1 (en) Method and apparatus for display a record list of image display device
US20080137725A1 (en) Systems and methods for displaying local media signal and broadcast signal utilizing one decoder
JP4546425B2 (en) Mobile phone with broadcast reception function
KR101000919B1 (en) Apparatus for recording and reproducing digital broadcasting contents without time delay in time shift reproduction
KR100751403B1 (en) Method and apparatus of playing broadcasting program
KR100782196B1 (en) (an) image display device for having time shift function and method for playing of the same
JP4724725B2 (en) Image display apparatus and control method thereof
KR20060008671A (en) Method for video/audio cut off for digital broadcasting signal receiver
KR101386820B1 (en) Method for controlling a recording and reproducing in digital broadcasting receiver
KR100731388B1 (en) Image display apparatus
KR100838869B1 (en) Method and apparatus for processing video signal of display device having a function for saving
KR20070114598A (en) (an) image display device for having time shift function and method for playing of the same
JP2007201766A (en) Data broadcast receiver

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140924

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150924

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160923

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20170922

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20180921

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20190924

Year of fee payment: 9