KR101906150B1 - 디스플레이장치 및 그 영상표시방법 - Google Patents

디스플레이장치 및 그 영상표시방법 Download PDF

Info

Publication number
KR101906150B1
KR101906150B1 KR1020110147158A KR20110147158A KR101906150B1 KR 101906150 B1 KR101906150 B1 KR 101906150B1 KR 1020110147158 A KR1020110147158 A KR 1020110147158A KR 20110147158 A KR20110147158 A KR 20110147158A KR 101906150 B1 KR101906150 B1 KR 101906150B1
Authority
KR
South Korea
Prior art keywords
signal
peripheral device
video
unit
video signal
Prior art date
Application number
KR1020110147158A
Other languages
English (en)
Other versions
KR20130078296A (ko
Inventor
박재홍
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020110147158A priority Critical patent/KR101906150B1/ko
Priority to EP12196253.4A priority patent/EP2610737B1/en
Priority to CN201210528521.5A priority patent/CN103188545B/zh
Priority to US13/716,906 priority patent/US8786783B2/en
Publication of KR20130078296A publication Critical patent/KR20130078296A/ko
Application granted granted Critical
Publication of KR101906150B1 publication Critical patent/KR101906150B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1407General aspects irrespective of display type, e.g. determination of decimal point position, display with fixed or driving decimal point, suppression of non-significant zeros
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43632Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635HDMI
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4884Data services, e.g. news ticker for displaying subtitles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/08Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H04N7/087Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only
    • H04N7/088Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital
    • H04N7/0884Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital for the transmission of additional display-information, e.g. menu for programme or channel selection
    • H04N7/0885Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital for the transmission of additional display-information, e.g. menu for programme or channel selection for the transmission of subtitles
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/10Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G09G2340/125Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels wherein one of the images is motion video
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/12Use of DVI or HDMI protocol in interfaces along the display data pipeline

Abstract

본 발명은 디스플레이장치 및 그 영상표시방법에 관한 것이다. 본 발명에 따른 디스플레이장치는 영상을 표시하는 디스플레이부와; 외장형 주변장치가 연결되는 주변장치 연결부와; 비디오 신호와 그래픽 신호를 합성하여 상기 디스플레이부로 출력하는 영상 합성부와; 상기 주변장치 연결부를 통하여 상기 디스플레이부에 표시되는 비디오 신호와 오버랩 될 수 있는 그래픽 신호가 입력되면, 입력된 그래픽 신호를 상기 영상합성부로 출력하는 제어부를 포함한다. 이에 의해 외장형 주변장치를 이용하여 비디오 신호와 오버랩 되는 그래픽 신호를 표시할 수 있는 디스플레이장치 및 그 영상표시방법이 제공된다.

Description

디스플레이장치 및 그 영상표시방법{DISPLAY APPARATUS AND IMAGE DISPLAYING METHOD}
본 발명은 디스플레이장치 및 이에 연결되는 외장형 주변장치에 관한 것으로서, 보다 상세하게는 디스플레이장치에서 지원하지 않는 기능을 제공하는 외장형 주변장치가 연결되는 디스플레이장치 및 이에 연결되는 외장형 주변장치에 관한 것이다.
현재, 대부분의 텔레비전은 방송신호를 수신하여 재생하는 기능을 가지고 있다. 한편, 기술의 급속한 발전으로 텔레비전과 같은 AV 기기의 하드웨어는 빠른 속도로 업그레이드되고 소프트웨어 역시 신규 기능이 추가되는 추세이다. 하지만, 텔레비전과 같은 고가의 기기의 디스플레이장치의 경우 사용자가 한번 구입하여 다시 신규로 구매 시까지 5~7년 이상 업그레이드되는 기능을 사용할 수 없다.
따라서, 스마트 텔레비전과 같은 새로운 기기가 아니면 동영상을 재생하거나, 다른 영상소스로부터 수신한 게임 영상을 수신하여 실행하거나 또는 인터넷과 같은 네트워크를 통하여 실시간으로 정보를 검색 및 표시하는 기능은 기존 텔레비전에서 구현할 수 없는 문제점이 존재한다.
본 발명의 일 실시예는 외장형 주변장치를 이용하여 비디오 신호의 컨텐츠와 관련되며, 상기 비디오 신호와 함께 표시될 수 있는 그래픽 신호를 표시할 수 있는 디스플레이장치 및 그 영상표시방법을 제공한다.
또한, 본 발명의 다른 실시예는 외장형 주변장치로부터 입력되는 영상이 종류를 판단하여 표시하는 디스플레이장치 및 그 영상표시방법을 제공한다.
본 발명의 일 실시예에 따른 디스플레이장치는 영상을 표시하는 디스플레이부와; 외장형 주변장치가 연결되는 주변장치 연결부와; 비디오 신호와 그래픽 신호를 합성하여 상기 디스플레이부로 출력하는 영상 합성부와; 상기 주변장치 연결부를 통하여 상기 디스플레이부에 표시되는 비디오 신호의 컨텐츠와 관련되며, 상기 비디오 신호와 함께 표시될 수 있는그래픽 신호가 입력되면, 입력된 그래픽 신호를 상기 영상합성부로 출력하는 제어부를 포함한다.
디스플레이장치는 비디오 신호를 처리하는 비디오 처리부를 더 포함하고, 상기 제어부는 상기 주변장치 연결부를 통하여 비디오 신호가 입력되면, 입력된 비디오 신호를 상기 비디오 처리부로 출력할 수 있다.
또한, 디스플레이장치는 사용자 선택을 수신하는 사용자 인터페이스를 더 포함하고, 상기 사용자 인터페이스를 통하여, 상기 그래픽 신호의 표시를 원하는 선택신호를 수신하면, 상기 제어부는 상기 외장형 주변장치로부터 제공되는 그래픽 신호가 상기 영상 합성부로 출력되도록 하는 제어신호를 상기 외장형 주변장치로 출력할 수 있다.
상기 외장형 주변장치로부터 제공되는 그래픽 신호는 투명도 정보를 포함할 수 있다.
상기 주변장치 연결부는 USB 포트와 HDMI 포트를 포함할 수 있다.
상기 외장형 주변장치는 네트워크에 연결 가능하며, 상기 네트워크를 통해 데이터를 수신할 수 있다.
한편, 본 발명의 다른 실시예에 따른 디스플레이장치는 영상을 표시하는 디스플레이부와; 외장형 주변장치가 연결되는 주변장치 연결부와; 비디오 신호를 처리하는 비디오 처리부와; 상기 비디오 신호와, 비디오 신호의 컨텐츠와 관련되며, 상기 비디오 신호와 함께 표시될 수 있는 그래픽 신호를 합성하여 상기 디스플레이부로 출력하는 영상 합성부와; 상기 주변장치 연결부를 통하여 수신되는 영상신호가 상기 그래픽 신호인지 여부를 판단하고, 판단 결과 상기 영상신호가 그래픽 신호이면 입력된 그래픽 신호를 상기 영상합성부로 출력하고, 상기 영상신호가 비디오 신호이면 입력된 비디오 신호를 상기 비디오 처리부로 출력하는 제어부를 포함할 수 있다.
또한, 본 발명의 또 다른 실시예에 따른, 외장형 주변장치가 연결되는 주변장치 연결부 및 디스플레이부를 포함하는 디스플레이장치의 영상표시방법은 상기 주변장치 연결부를 통하여 상기 디스플레이부에 표시되는 비디오 신호의 컨텐츠와 관련되며, 상기 비디오 신호와 함께 표시될 수 있는 그래픽 신호를 수신하는 단계와; 입력된 그래픽 신호를 상기 비디오 신호와 합성하는 단계와; 상기 디스플레이부에 상기 비디오 신호와 그래픽 신호를 표시하는 단계를 포함할 수 있다.
또한, 본 발명의 또 다른 실시예에 따른 외장형 주변장치가 연결되는 주변장치 연결부 및 디스플레이부를 포함하는 디스플레이장치의 영상표시방법은 상기 주변장치 연결부를 통하여 영상신호를 수신하는 단계와; 상기 영상신호가 상기 디스플레이부에 표시되는 비디오 신호의 컨텐츠와 관련되며, 상기 비디오 신호와 함께 표시될 수 있는 그래픽 신호인지 여부를 판단하는 단계와; 판단 결과 상기 영상신호가 그래픽 신호이면 입력된 그래픽 신호를 상기 비디오 신호로 합성하고, 상기 영상신호가 비디오 신호이면 처리하여 상기 디스플레이부에 표시하는 단계를 포함할 수 있다.
이상 설명한 바와 같이, 본 발명에 따르면, 외장형 주변장치를 이용하여 비디오 신호와 오버랩 되는 그래픽 신호를 표시할 수 있는 디스플레이장치 및 그 영상표시방법이 제공된다.
또한, 본 발명의 다른 실시예에 따르면, 외장형 주변장치로부터 입력되는 영상이 종류를 판단하여 표시하는 디스플레이장치 및 그 영상표시방법이 제공된다.
도 1은 본 발명의 일 실시예예 따른 디스플레이장치의 제어블럭도이고,
도 2는 도 1의 디스플레이장치에 표시되는 합성신호를 도시한 도면이고,
도 3은 도 1의 디스플레이장치의 영상표시방법을 설명하기 위한 제어흐름도이고,
도 4는 본 발명의 다른 실시예에 따른 디스플레이장치의 제어블럭도이고,
도 5는 도 4의 디스플레이장치의 영상표시방법을 설명하기 위한 제어흐름도이고,
도 6은 본 발명의 또 다른 실시예에 따른 디스플레이장치의 영상표시방법을 설명하기 위한 제어흐름도이다.
이하, 첨부한 도면을 참고로 하여 본 발명의 실시예들에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예들에 한정되지 않는다. 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 동일 또는 유사한 구성요소에 대해서는 동일한 참조부호를 붙이도록 한다.
도 1은 본 발명의 일 실시예예 따른 디스플레이장치의 제어블럭도이다.
도시되어 있는 바와 같이, 디스플레이장치(100)는 그래픽 처리부(10), 비디오 처리부(20), 영상 합성부(30), 디스플레이부(40), 주변장치 연결부(50) 및 이들을 제어하는 제어부(60)를 포함한다. 디스플레이장치(100)는 방송신호와 같은 비디오 신호를 수신하여 디스플레이 할 수 있는 컴퓨터, 모바일 기기, 디지털 텔레비전 및 유무선 네트워크에 연결될 수 있는 AV 기기와 같은 디바이스일 수 있다. 방송신호는 디지털 방송신호 및 아날로그 방송신호, 위성 방송신호, 케이블 방송신호 등을 포함할 수 있다. 디스플레이장치(100)는 도시하지 않았지만 방송신호를 수신하는 방송수신부 또는 네트워크를 통하여 비디오 신호를 수신할 수 있는 네트워크 인터페이스를 포함할 수도 있다.
그래픽 처리부(10)는 비디오 신호의 상부에 중첩되는 OSD(on screen display), 서브 픽쳐, 자막 등과 같은 그래픽 신호를 처리한다. 그래픽 신호는 복수의 레이어로 구성될 수 있다. 이러한 그래픽 처리부(10)는 OSD와 같은 그래픽 유저 인터페이스를 생성하는 OSD 생성부 또는 디스플레이장치(100)에서 중추적인 제어를 담당하는 CPU(central processing unit)로 구현될 수 있다. 그래픽 처리부(10)가 CPU로 구현되는 경우, 그래픽 처리부(10)는 제어부(60)와 머지될 수 있다. 도 1의 개별적인 구성은 설명의 편의를 위한 것으로 물리적으로 구성요소가 분리되는 것을 의미하는 것은 아니다.
비디오 처리부(20)는 방송신호와 같은 메인 영상인 비디오 신호를 처리한다. 비디오 처리부(20)는 디멀티플렉서, MPEG 디코더, 화질조정처리부 및 화질개선처리부 등을 포함할 수 있다. 또한, 디스플레이장치(100)는 음향 처리를 위한 음향처리부(미도시)를 더 포함할 수 있다.
영상 합성부(30)는 비디오 신호와 그래픽 신호를 합성하여 디스플레이부(40)로 출력한다. 영상 합성부(30)는 중첩되는 영상의 투명정도를 나타내는 투명도 정보에 기초하여 영상을 합성하는 알파 블렌딩을 수행한다. 투명도 정보는 통상적으로 알파값으로 불리며, 알파값은 0에서 255의 투명도 정도를 구별할 수 있는 8비트 데이터이다. 영상 합성부(30)는 비디오 신호와 그래픽 신호를 합성하는 공지된 모든 알고리즘을 포함하며, 특정 방법에 한정되지 않는다. 영상 합성부(30)는 방송신호와 같은 하위 레이어에 채널 번호 및 프로그램 제목 등을 표시하는 채널 정보, 자막, 문자다중방송(teletext) 등의 그래픽 신호를 상위 레이어로 합성한다. 영상 합성부(30)는 스케일러 구현될 수도 있으며, 영상의 화질을 조정하여 최종적으로 디스플레이부(40)로 출력하는 처리모듈로 구현될 수도 있다.
디스플레이부(40)는 수신되는 방송신호와 같은 메인 영상, 메인 영상에 합성된 그래픽 영상을 표시한다. 디스플레이부(40)는 액정을 포함하는 LCD 패널, 유기발광소자를 포함하는 OLED(organic light emitting diode) 패널 또는PDD(plasma display panel), 플렉서블 디스플레이(Flexible display), 3차원 디스플레이(3D display) 등을 포함할 수 있으며, 상기 패널을 구동하는 패널 구동부를 포함할 수 있다.
주변장치 연결부(50)는 외장형 주변장치(200)가 연결되는 인터페이스에 해당한다. 주변장치 연결부(50)는 도시된 바와 같이, USB 포트(51)와 HDMI 포트(53)로 구성되어 있다. 주변장치 연결부(50)에는 기존의 기기에서 지원되지 않았던 기능을 기원하기 위하여 텔레비전과 같은 기기에 접속되는 외장형 주변장치가 연결될 수 있다. USB 포트(51)를 통하여 제어 신호를 포함하는 USB 신호가 송수신되고, HDMI 포트(53)를 통하여는 외장형 주변장치(200)로부터 디지털 신호가 수신될 수 있다. USB 포트(51)와 HDMI 포트(53)를 통하여 송수신되는 신호는 정해진 규격에 따르므로, 송수신되는 신호에 대한 구체적인 설명은 생략한다.
외장형 주변장치(200)는 디스플레이장치(100)에서 구현할 수 없는 기능을 제공하기 위하여 디스플레이장치(100)로 다양한 영상신호를 제공한다. 예를 들어, 외장형 주변장치(200)는 게임 영상 또는 방송신호 이외의 영화와 같은 동영상이 디스플레이장치(100)에서 재생될 수 있도록 게임 영상 및 필름 영상을 디스플레이장치(100)에 제공할 수 있다. 또한, 외장형 주변장치(200)는 현재 수신되어 표시되고 있는 방송신호와 관련 있는 데이터 서비스를 제공할 수도 있다. 예를 들어, 디스플레이장치(100)가 방송신호를 표시하고 있는 경우, 표시되고 있는 방송신호와 관련된 검색 기능, 방송프로그램에 관련된 광고 또는 프로그램 정보, 설문조사 등과 같은 실시간 데이터 신호 또는 주식정보 등을 제공할 수도 있다. 이러한 정보는 인터넷과 같은 웹 네트워크를 통하여 외장형 주변장치(200)로 수신되는 것으로 기존의 디스플레이장치(100)로 입력될 수 없는 데이터에 해당한다. 정리하면, 외장형 주변장치(200)는 현재 DVD와 같은 영상 소스를 넘어서, 스마트 텔레비전이 제공할 수 있는 다양한 기능을 디스플레이장치(100)에 제공할 수 있다.
외장형 주변장치(200)가 HDMI 포트(53)를 통하여 디스플레이장치(100)로 제공하는 영상신호는 전체 디스플레이부(40)에 표시되는 메인 영상인 비디오 신호와 방송신호와 같이 디스플레이부(40)에 표시되고 있는 메인 영상에 오버랩 되는, 즉 비디오 신호의 컨텐츠와 관련되며, 비디오 신호와 함께 표시될 수 있는 그래픽 신호를 포함할 수 있다. 동영상 또는 게임 영상은 비디오 신호이고, 방송신호와 관련된 각종 데이터, 주식 정보와 같은 데이터 또는 OSD 정보는 그래픽 정보에 해당한다.
이처럼, 외장형 주변장치(200)는 새롭게 개발되어 업데이트된 기능을 수행할 수 없는 디스플레이장치(100)에 여러 가지 기능을 부여할 수 있도록 디스플레이장치(100)에 연결되어 다양한 영상을 제공하는 새로운 개념의 디바이스를 의미한다. 이러한 외장형 주변장치(200)를 통하여 사용자는 새로운 기기를 구매하지 않아도 새로운 기능을 손쉽게 이용할 수 있다.
제어부(60)는 주변장치 연결부(50)를 통하여 디스플레이부(40)에 표시되는 비디오 신호와 함께 표시될 수 있는 그래픽 신호가 입력되면, 입력된 그래픽 신호를 영상 합성부(30)로 출력한다.
기존의 DVD와 같은 외부 소스로부터 입력되는 영상신호는 디스플레이장치의 비디오 처리부로 입력되어 처리되었다. 따라서, 그래픽 신호의 경우 메인 영상과 오버랩 되지 못하는 문제가 존재한다. 즉, 입력되는 영상의 소스가 두 개인 경우, 그래픽 신호의 오버랩 처리가 되지 않았다.
본 실시예에 따를 경우, 외장형 주변장치(200)로부터 제공되는 신호가 비디오 신호인 경우에는 비디오 신호는 비디오 처리부(20)에서 처리되어 디스플레이부(40)에 표시되고, 영상신호가 그래픽 신호인 경우에는 영상 합성부(30)로 입력된다. 영상 합성부(30)는 주변장치 연결부(50)를 통하여 입력된 그래픽 신호를 비디오 신호와 합성하여 디스플레이부(40)로 출력한다. 사용자는 방송신호와 관련된 다양한 데이터 정보가 방송신호와 오버랩 되어 표시되는 것을 볼 수 있다. 외장형 주변장치(200)로부터 입력되는 그래픽 신호는 알파 블렌딩을 위한 알파값도 포함되어 있다. HDMI 버전 1.3부터 HDMI 인터페이스는 24 bit 이상 (30~48 bit)의 딥 컬러(deep color)를 지원한다. 따라서, 8 bit의 RGB가 입력되는 경우, 남은 bit를 통하여 알파값이 수신될 수 있다. 디스플레이장치(100)와 외장형 주변장치(200) 간에는 상술한 그래픽 신호의 데이터 통신을 위한 인터페이스가 규격화 될 수 있다.
도 2는 디스플레이부(40)에 표시되는 합성신호를 도시한 도면이다. 도시된 바와 같이, 디스플레이부(40)에는 비디오 신호(Ⅰ)와 그래픽 신호(Ⅱ)가 표시된다. 비디오 신호(Ⅰ)로 메인 영상인 방송신호가 표시되고, 그래픽 신호(Ⅱ)로는 사용자 입력을 위한 검색창과 방송신호에 관련된 데이터(줄거리, 출연진, 프리뷰, 관련 프로그램, 채널 정보 등)이 표시된다. 그래픽 신호(Ⅱ)는 외장형 주변장치(200)로부터 수신한 신호로서 이는 디스플레이장치(100) 자체에서는 제공할 수 없는 데이터이지만, 본 실시예에 따르면, 외장형 주변장치(200)로부터 수신하여 이를 디스플레이부(40)에 표시할 수 있다. 사용자는 영상 합성부(30)에서 합성한 영상신호를 통하여 디스플레이장치(100)가 지원하지 않는 기능을 사용할 수 있다.
도 3은 도 1의 디스플레이장치의 영상표시방법을 설명하기 위한 제어흐름도이다. 도 3을 참조하여 본 실시예에 따른 디스플레이장치의 영상표시방법을 정리하면 다음과 같다.
우선, 디스플레이장치(100)는 주변장치 연결부(50)를 통하여 비디오 신호의 컨텐츠와 관련되며, 상기 비디오 신호와 함께 표시될 수 있는 그래픽 신호를 수신한다(S10). 주변장치 연결부(50)의 HDMI 포트(53)를 통하여 입력되는 그래픽 신호는 RGB 이외에 알파 블랜딩을 위한 알파값을 포함한다.
영상 합성부(30)는 입력된 그래픽 신호와 현재 수신되는 비디오 신호를 합성한다(S20). 이렇게 합성된 합성신호는 디스플레이부(40)에 표시된다(S30).
또한, 영상 합성부(30)에서는 주변장치 연결부(50)를 통하여 입력된 그래픽 신호뿐만 아니라, 원래 디스플레이장치(100)가 제공할 수 있었던 그래픽 신호도 비디오 신호에 합성한다. 예를 들어, 외장형 주변장치(200)가 아닌 디스플레이장치(100) 자체적으로 제공 가능한 채널 정보, 자막, 문자다중방송(teletext) 등을 합성하여 외장형 주변장치(200)로부터 수신된 그래픽 신호와 함께 표시할 수도 있다.
비디오 신호는 비디오 처리부(20)에서 처리되기 전 또는 처리 후에 다양한 화질 처리과정을 거칠 수 있다. 만약, 그래픽 신호에 화질 처리가 필요한 경우, 외장형 주변장치(200)에서 이러한 기능을 수행할 수도 있고, 영상 합성부(30)에서 합성되는 과정에서 수행될 수도 있다. 또는, 비디오 신호와 그래픽 신호가 합성된 후 화질 개선을 위한 별도의 처리 과정을 거칠 수도 있다.
도 4는 본 발명의 다른 실시예에 따른 디스플레이장치의 제어블럭도이다.
본 실시예에 따른 디스플레이장치(101)는 사용자 선택을 수신하는 사용자 인터페이스(70)를 포함한다. 사용자 인터페이스(70)는 리모컨, 키패드, 터치패드, 버튼, 마우스 등과 같은 사용자 입력부와, 사용자 입력부와 상호 작용할 수 있는 그래픽 인터페이스를 포함한다. 사용자는 방송신호를 보다가 인터넷 기반으로 하는 그래픽 신호를 보기를 원하는 경우, 사용자 인터페이스를 통하여 데이터를 요청할 수 있다. 이러한 사용자 선택이 수신되면, 제어부(60)는 외장형 주변장치(200)로부터 제공되는 그래픽 신호가 영상 합성부(30)로 출력되도록 하는 제어신호를 외장형 주변장치(200)로 출력한다.
이러한 제어신호를 수신한 외장형 주변장치(200)는 사용자가 원하는 그래픽 신호를 비디오 처리부(20)가 아닌 영상 합성부(30)로 출력한다. 즉, 외장형 주변장치(200)는 디스플레이장치(101)의 통신을 통하여 입력되는 영상신호의 종류에 따라 상이한 루트로 영상신호를 출력한다. 정리하면, 사용자가 디스플레이장치(101)에게 어떠한 서비스를 원하면, 제어부(60)는 해당 서비스를 외장형 주변장치(200)에 요구할 수 있고, 제어부(60)의 제어부의 제어신호에 따라 영상신호의 출력 루트가 결정된다. 외장형 주변장치(200)가 제공할 영상신호가 동영상 또는 게임 영상과 같은 비디오 신호이면 영상신호를 비디오 처리부(20)로 출력되고, 인터넷을 통하여 수신되는 그래픽 신호인 경우 영상 합성부(30)로 출력된다.
도 5는 도 4의 디스플레이장치의 영상표시방법을 설명하기 위한 제어흐름도이다.
우선, 사용자는 사용자 인터페이스(70)를 이용하여 그래픽 신호(Ⅱ)를 수신할 것을 선택할 수 있고, 제어부(60)는 그래픽 신호의 표시를 원하는 선택신호를 수신한다(S40).
제어부(60)는 그래픽 신호를 요청하는 제어신호를 주변장치 연결부(50)의 USB 포트(51)를 통하여 외장형 주변장치(200)로 출력한다(S50).
그런 후, 주변장치 연결부(50)의 HDMI 포트(53)를 통하여 비디오 신호와 오버랩 될 수 있는 그래픽 신호를 수신한다(S10).
이하, 영상 합성부(30)가 입력된 그래픽 신호와 현재 수신되는 비디오 신호를 합성하고(S20), 합성된 합성신호가 디스플레이부(40)에 표시되는 것(S30)은 상기 실시예와 동일하다.
도 6은 본 발명의 또 다른 실시예에 따른 디스플레이장치의 영상표시방법을 설명하기 위한 제어흐름도이다.
본 발명의 다른 실시예에 따르면, 제어부(60)는 주변장치 연결부(50)를 통하여 수신되는 영상신호가 그래픽 신호인지 여부를 판단할 수 있다.
도시된 바와 같이, 제어부(60)는 외장형 주변장치(200)로부터 영상신호를 수신한다(S60). 디스플레이장치(100)가 방송신호를 수신하여 표시하면, 외장형 주변장치(200)로부터 자동적으로 다양항 그래픽 신호가 수신될 수도 있다. 이런 경우, 사용자가 별도로 그래픽 신호를 수신하지 않아도 외장형 주변장치(200)로부터 영상신호가 출력될 수 있다. 또한, 외장형 주변장치(200)로부터 출력될 수 있는 영상신호의 자동 재생이 사전에 설정될 수도 있을 것이다.
제어부(60)는 HDMI포트(53)를 통하여 입력되는 영상신호가 그래픽 신호인지 여부를 판단한다(S70).
판단 결과 영상신호가 그래픽 신호이면 입력된 그래픽 신호를 영상 합성부(30)로 출력하고, 영상 합성부(30)는 그래픽 신호와 비디오 신호를 합성한다(S20).
반면, 판단 결과, 영상신호가 비디오 신호이면 입력된 비디오 신호를 비디오 처리부(20)로 출력하여 처리되도록 한다(S80).
영상 합성부(30) 또는 비디오 처리부(20)에서 처리된 영상신호는 디스플레이부(40)에 표시된다(S90).
비록 본 발명의 몇몇 실시예들이 도시되고 설명되었지만, 본 발명이 속하는 기술분야의 통상의 지식을 가진 당업자라면 본 발명의 원칙이나 정신에서 벗어나지 않으면서 본 실시예를 변형할 수 있음을 알 수 있을 것이다. 발명의 범위는 첨부된 청구항과 그 균등물에 의해 정해질 것이다.
10 : 그래픽 처리부 20 : 비디오 처리부
30 : 영상 합성부 40 : 디스플레이부
50 : 주변장치 연결부 60 : 제어부
70 : 사용자 인터페이스 100 : 디스플레이장치
200 : 외장형 주변장치

Claims (11)

  1. 디스플레이장치에 있어서,
    영상을 표시하는 디스플레이부와;
    외장형 주변장치가 연결되는 주변장치 연결부와;
    비디오 신호를 처리하는 비디오 처리부와;
    상기 비디오 신호와, 상기 비디오 신호와 함께 표시될 수 있는 그래픽 신호를 합성하여 상기 디스플레이부로 출력하는 영상 합성부와;
    상기 외장형 주변장치로부터 상기 주변장치 연결부의 제1 포트를 통하여 수신되는 영상신호가 비디오 신호이면, 입력된 비디오 신호를 상기 비디오 처리부로 출력하고,
    상기 외장형 주변장치로부터 상기 주변장치 연결부의 상기 제1 포트를 통하여 수신되는 영상신호가 그래픽 신호이면, 입력된 그래픽 신호를 상기 비디오 처리부를 거치지 않고 상기 영상합성부로 출력하고,
    상기 영상합성부가 상기 제1 포트를 통해 수신한 그래픽 신호를 상기 비디오 처리부에 의해 처리된 비디오신호의 상위 레이어로 합성하도록 제어하는 제어부를 포함하는 것을 특징으로 하는 디스플레이장치.
  2. 삭제
  3. 제1항에 있어서,
    사용자 선택을 수신하는 사용자 인터페이스를 더 포함하고,
    상기 사용자 인터페이스를 통하여, 상기 그래픽 신호의 표시를 원하는 선택신호를 수신하면,
    상기 제어부는 상기 외장형 주변장치로부터 제공되는 그래픽 신호가 상기 영상 합성부로 출력되도록 하는 제어신호를 상기 주변장치 연결부의 제2 포트를 통해 상기 외장형 주변장치로 출력하는 것을 특징으로 하는 디스플레이장치.
  4. 제1항에 있어서,
    상기 외장형 주변장치의 상기 제1 포트를 통하여 수신되는 그래픽 신호는 투명도 정보를 포함하고 있는 것을 특징으로 하는 디스플레이장치.
  5. 제3항에 있어서,
    상기 제1 포트는 HDMI 포트이고, 상기 제2 포트는 USB 포트인 것을 특징으로 하는 디스플레이장치.
  6. 제1항에 있어서,
    상기 외장형 주변장치는 네트워크에 연결 가능하며, 상기 네트워크를 통해 데이터를 수신할 수 있는 것을 특징으로 하는 디스플레이장치.
  7. 삭제
  8. 외장형 주변장치가 연결되는 주변장치 연결부 및 디스플레이부를 포함하는 디스플레이장치의 영상표시방법에 있어서,
    상기 외장형 주변장치로부터 상기 주변장치 연결부의 제1 포트를 통하여 영상신호를 수신하는 단계와;
    상기 외장형 주변장치로부터 상기 주변장치 연결부의 상기 제1 포트를 통하여 수신되는 영상신호가 비디오 신호이면, 입력된 비디오 신호를 비디오 처리부로 출력하는 단계와;
    상기 비디오 처리부에서 상기 입력된 비디오 신호를 처리하는 단계와;
    상기 처리된 비디오 신호를 영상합성부로 출력하는 단계와;
    상기 외장형 주변장치로부터 상기 주변장치 연결부의 상기 제1 포트를 통하여 수신되는 영상신호가 상기 비디오 신호와 함께 표시될 수 있는 그래픽 신호이면, 입력된 그래픽 신호를 상기 비디오 처리부를 거치지 않고 상기 영상합성부로 출력하는 단계와;
    상기 영상합성부에서 상기 제1 포트를 통해 수신한 그래픽 신호를 상기 비디오 처리부에 의해 처리된 비디오신호의 상위 레이어로 합성하는 단계와;
    상기 디스플레이부에 상기 비디오신호와, 상기 비디오신호에 합성된 그래픽 신호를 표시하는 단계를 포함하는 것을 특징으로 하는 디스플레이장치의 영상표시방법.
  9. 삭제
  10. 제8항에 있어서,
    상기 디스플레이장치는 사용자 선택을 수신하는 사용자 인터페이스를 더 포함하고,
    상기 사용자 인터페이스를 통하여, 상기 그래픽 신호의 표시를 원하는 선택신호를 수신하는 단계와;
    상기 외장형 주변장치로부터 제공되는 그래픽 신호가 상기 영상 합성부로 출력되도록 하는 제어신호를 상기 주변장치 연결부의 제2 포트를 통해 출력하는 단계를 더 포함하는 것을 특징으로 하는 디스플레이장치의 영상표시방법.
  11. 제10항에 있어서,
    상기 제1 포트는 HDMI 포트이고, 상기 제2 포트는 USB 포트인 것을 특징으로 하는 디스플레이장치의 영상표시방법.
KR1020110147158A 2011-12-30 2011-12-30 디스플레이장치 및 그 영상표시방법 KR101906150B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020110147158A KR101906150B1 (ko) 2011-12-30 2011-12-30 디스플레이장치 및 그 영상표시방법
EP12196253.4A EP2610737B1 (en) 2011-12-30 2012-12-10 Display apparatus and image displaying method thereof
CN201210528521.5A CN103188545B (zh) 2011-12-30 2012-12-10 显示设备及其图像显示方法
US13/716,906 US8786783B2 (en) 2011-12-30 2012-12-17 Video and graphic combination and display apparatus and image combining and displaying method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110147158A KR101906150B1 (ko) 2011-12-30 2011-12-30 디스플레이장치 및 그 영상표시방법

Publications (2)

Publication Number Publication Date
KR20130078296A KR20130078296A (ko) 2013-07-10
KR101906150B1 true KR101906150B1 (ko) 2018-10-11

Family

ID=47563013

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110147158A KR101906150B1 (ko) 2011-12-30 2011-12-30 디스플레이장치 및 그 영상표시방법

Country Status (4)

Country Link
US (1) US8786783B2 (ko)
EP (1) EP2610737B1 (ko)
KR (1) KR101906150B1 (ko)
CN (1) CN103188545B (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023182624A1 (ko) * 2022-03-22 2023-09-28 엘지전자 주식회사 디스플레이 장치

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104219555B (zh) * 2014-08-21 2018-03-30 北京奇艺世纪科技有限公司 一种安卓系统终端中的视频显示装置和方法
CN106131645A (zh) * 2016-07-18 2016-11-16 乐视控股(北京)有限公司 一种频道标识的显示方法和装置
KR20220028698A (ko) 2020-08-31 2022-03-08 삼성전자주식회사 고해상도 디스플레이를 위한 영상 처리 장치, 영상 처리 방법 및 이를 포함하는 어플리케이션 프로세서
KR20220056404A (ko) * 2020-10-28 2022-05-06 삼성전자주식회사 디스플레이장치 및 그 제어방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001030088A1 (en) * 1999-10-21 2001-04-26 Koninklijke Philips Electronics N.V. Playback apparatus and method for playback of a record carrier

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5641319A (en) * 1994-08-10 1997-06-24 Lodgenet Entertainment Corporation Entertainment system for providing interactive video game responses to the game interrogations to the video game engines without being processed by the host computer
US6263507B1 (en) * 1996-12-05 2001-07-17 Interval Research Corporation Browser for use in navigating a body of information, with particular application to browsing information represented by audiovisual data
US7313805B1 (en) * 1998-11-30 2007-12-25 Sony Corporation Content navigator graphical user interface system and method
US6621499B1 (en) * 1999-01-04 2003-09-16 Ati International Srl Video processor with multiple overlay generators and/or flexible bidirectional video data port
US6481010B2 (en) * 1999-03-01 2002-11-12 Sony Corporation TV planner for DSS
US6519771B1 (en) * 1999-12-14 2003-02-11 Steven Ericsson Zenith System for interactive chat without a keyboard
US20030079224A1 (en) * 2001-10-22 2003-04-24 Anton Komar System and method to provide additional information associated with selectable display areas
US7631277B1 (en) * 2001-12-14 2009-12-08 Apple Inc. System and method for integrating media objects
US20090180025A1 (en) 2002-05-28 2009-07-16 Sony Corporation Method and apparatus for overlaying graphics on video
US7548242B1 (en) * 2002-08-30 2009-06-16 Interactive Sports Holdings, Inc. Systems and methods for integrating graphic animation technologies in fantasy sports contest applications
KR100471089B1 (ko) * 2003-04-15 2005-03-10 삼성전자주식회사 디스플레이장치 및 그 화상처리방법
US7307667B1 (en) * 2003-06-27 2007-12-11 Zoran Corporation Method and apparatus for an integrated high definition television controller
US7425992B2 (en) 2004-10-29 2008-09-16 Sharp Laboratories Of America, Inc. Method and apparatus for upgrading a television system
US20060253874A1 (en) * 2005-04-01 2006-11-09 Vulcan Inc. Mobile interface for manipulating multimedia content
KR101212088B1 (ko) * 2005-11-30 2012-12-13 삼성전자주식회사 영상처리장치 및 그 제어방법
US7840979B2 (en) * 2006-06-30 2010-11-23 Microsoft Corporation Graphical tile-based expansion cell guide
US20080084834A1 (en) * 2006-10-09 2008-04-10 Zbigniew Stanek Multiplexed connection interface for multimedia serial data transmission
US8407741B2 (en) * 2006-11-20 2013-03-26 Sk Planet Co., Ltd. System, server and method for providing supplementary information service related to broadcast content
US20080148335A1 (en) * 2006-12-15 2008-06-19 Thomas Patrick Dawson Expansion of television functionality
JP2009163595A (ja) * 2008-01-09 2009-07-23 Sony Corp 情報処理システム、情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
US8196174B2 (en) * 2008-12-23 2012-06-05 At&T Intellectual Property I, L.P. Navigation method and system to provide a navigation interface
JP2011087162A (ja) * 2009-10-16 2011-04-28 Sony Corp 受信装置、受信方法、送信装置および送信方法
JP5073032B2 (ja) * 2010-09-27 2012-11-14 株式会社東芝 情報出力装置、情報処理システムおよび情報処理方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001030088A1 (en) * 1999-10-21 2001-04-26 Koninklijke Philips Electronics N.V. Playback apparatus and method for playback of a record carrier

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023182624A1 (ko) * 2022-03-22 2023-09-28 엘지전자 주식회사 디스플레이 장치

Also Published As

Publication number Publication date
CN103188545A (zh) 2013-07-03
EP2610737A3 (en) 2017-03-15
US8786783B2 (en) 2014-07-22
EP2610737A2 (en) 2013-07-03
CN103188545B (zh) 2019-01-18
US20130169871A1 (en) 2013-07-04
KR20130078296A (ko) 2013-07-10
EP2610737B1 (en) 2022-02-02

Similar Documents

Publication Publication Date Title
US10579206B2 (en) Display apparatus and method for controlling the display apparatus
KR101588660B1 (ko) 영상 이동이 가능한 디스플레이 장치 및 그 방법
JP4859219B2 (ja) 映像出力装置及びその制御方法
KR101891147B1 (ko) 에이치디엠아이 신호로 방송 수신기의 듀얼 디스플레이를 위한 휴대용 단말기의 장치 및 방법
US20100321479A1 (en) Receiving system and method of providing 3d image
KR101906150B1 (ko) 디스플레이장치 및 그 영상표시방법
US20100165200A1 (en) Display control device, display control method and display control program
US7821577B2 (en) Display device and method of driving the same
KR102212270B1 (ko) 통합된 컨텐츠 소스들을 이용하여 미디어 컨텐츠를 제시하기 위한 방법들, 시스템들 및 매체들
US20050262445A1 (en) Information-processing apparatus and display control method
JP2010258707A (ja) 映像表示装置、映像表示方法、プログラムおよび記録媒体
US20140026100A1 (en) Method and apparatus for displaying an image, and computer readable recording medium
KR101902320B1 (ko) 디스플레이장치, 이에 연결되는 외장형 주변장치 및 영상표시방법
US8199259B2 (en) Video display device
KR20190115256A (ko) 전자장치, 그 제어방법 및 기록매체
US11234042B2 (en) Display device, control method therefor and recording medium
CN111432257A (zh) 一种显示设备开启屏幕保护的方法及显示设备
JP2006108750A (ja) 画像表示装置及び画像表示方法
US11934645B2 (en) Display control device and display control method
JP2007293203A (ja) 画像処理装置、画像処理方法、プログラム、およびテレビジョン受像機
JP2010258909A (ja) 表示装置、表示方法、プログラムおよび記録媒体
KR20190055418A (ko) 컨텐츠 제공장치, 그 제어방법 및 기록매체
US20230179819A1 (en) Image display device and operation method thereof
KR20100047764A (ko) 텔레비전의 피벗 기능을 이용한 주화면 및 부화면 출력 제어 장치 및 방법
JP2013211914A (ja) 表示装置、表示方法、プログラムおよび記録媒体

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant