KR20070120069A - 입력 및 출력 파라미터에 기초하여 프로그래밍 가능한그래픽/오디오 프로세서를 조절하기 위한 시스템, 방법, 및컴퓨터 프로그램 제품 - Google Patents

입력 및 출력 파라미터에 기초하여 프로그래밍 가능한그래픽/오디오 프로세서를 조절하기 위한 시스템, 방법, 및컴퓨터 프로그램 제품 Download PDF

Info

Publication number
KR20070120069A
KR20070120069A KR1020070059144A KR20070059144A KR20070120069A KR 20070120069 A KR20070120069 A KR 20070120069A KR 1020070059144 A KR1020070059144 A KR 1020070059144A KR 20070059144 A KR20070059144 A KR 20070059144A KR 20070120069 A KR20070120069 A KR 20070120069A
Authority
KR
South Korea
Prior art keywords
parameters
processor
graphics
programmable
output parameters
Prior art date
Application number
KR1020070059144A
Other languages
English (en)
Other versions
KR100942856B1 (ko
Inventor
윌리엄 사무엘 허즈
앤드류 씨 피어
Original Assignee
엔비디아 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엔비디아 코포레이션 filed Critical 엔비디아 코포레이션
Publication of KR20070120069A publication Critical patent/KR20070120069A/ko
Application granted granted Critical
Publication of KR100942856B1 publication Critical patent/KR100942856B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/363—Graphics controllers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0606—Manual adjustment
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0666—Adjustment of display parameters for control of colour parameters, e.g. colour temperature
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0673—Adjustment of display parameters for control of gamma adjustment, e.g. selecting another gamma curve
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G09G2370/042—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller for monitor identification
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 애스펙트를 조절하기 위한 시스템, 방법, 및 컴퓨터 프로그램 제품이 제공된다. 일반적으로, 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 입력 파라미터 및 하나 이상의 출력 파라미터가 식별된다. 그 후, 이에 따라, 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 애스펙트가 동적으로 조절될 수도 있다. 이러한 조절장치는 하나 이상의 입력 파라미터 및 하나 이상의 출력 파라미터 모두의 작용으로 수행된다.
입력 파라미터, 출력 파라미터

Description

입력 및 출력 파라미터에 기초하여 프로그래밍 가능한 그래픽/오디오 프로세서를 조절하기 위한 시스템, 방법, 및 컴퓨터 프로그램 제품{SYSTEM, METHOD, AND COMPUTER PROGRAM PRODUCT FOR ADJUSTING A PROGRAMMABLE GRAPHICS/AUDIO PROCESSOR BASED ON INPUT AND OUTPUT PARAMETERS}
도 1 은 종래 기술에 따른 그래픽 프로세서 조절장치를 나타내는 도면.
도 2 는 일 실시형태에 따라서 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 애스펙트를 조절하는 방법을 나타내는 도면.
도 3 은 일 실시형태에 따라서 그래픽 및/또는 오디오 프로세서 조절장치를 나타내는 도면.
도 4 는 일 실시형태에 따라서 프로그래밍 가능한 그래픽 프로세서의 하나 이상의 애스펙트를 조절하는 방법을 나타내는 도면.
도 5 는 다른 실시형태에 따라서 프로그래밍 가능한 그래픽 프로세서의 하나 이상의 애스펙트를 조절하는 방법을 나타내는 도면.
도 6 은 다양한 사전 실시형태의 다양한 아키텍쳐 및/또는 기능이 수행되는 일 예시적인 컴퓨터 시스템을 나타내는 도면.
* 도면의 주요 부분에 대한 부호의 설명 *
102, 104 : 그래픽 프로세서 조절장치 302 : 프로세서 조절장치
404 : 제어 패널 406 : 프로파일
408 : 강화된 EDID 410 : 로직
416 : 센서 502 : 소스
601 : 호스트 프로세서 602 : 버스
604 : 메인 메모리 610 : 보조 저장장치
606 : 그래픽 프로세서 608 : 디스플레이 디바이스
발명의 분야
본 발명은 프로그래밍 가능한 아키텍쳐에 관한 것으로, 더욱 상세하게는, 다양한 파라미터에 기초하여 프로그래밍 가능한 그래픽/오디오 프로세서를 조절하는 것에 관한 것이다.
배경
사실상, 일반적으로 프로세서는 점점 더 조절가능해 지고 있다. 그래픽 프로세서는 이러한 경향을 나타내는 프로세서들의 일 예이다. 이러한 조절성은, 먼저, 이러한 프로세서의 다양한 형태의 프로그래밍 능력이 증대됨으로써 발전되어왔다. 예로서, 그래픽 프로세서는 특정 어플리케이션의 특징, 출력 디바이스의 물리적 속성, 등과 같은 다양한 요인에 기초하여 그래픽 프로세싱을 조절할 수 있는 다양한 프로그래밍 가능한 셰이더 (shader) 를 구비한다.
예를 들어, 그래픽 프로세서는 현재 출력 디바이스 (예를 들어, 디스플레이, 등) 에 관한 정보를 이들 디바이스에 대한 프로세싱을 적절히 수행하기 위해 질의한다. 통상, 이러한 정보는 VESA (비디오 전자 표준 협회; video electronics standards association) 에 의해 정의된 EDID (확장된 디스플레이 식별 데이터; extended display identification data) 에 의해 제공된다. 통상, 이러한 EDID 는 벤더 정보, 최대 이미지 크기, 색상 특성, 팩토리 사전설정 타이밍, 주파수 범위 제한, 및 출력 디스플레이 명칭, 일련 번호 등에 대한 특징 문자열 등을 포함하는 성능 및 출력 디스플레이에 관한 기본적인 정보를 포함한다.
불행히도, 그래픽 프로세서에 대한 조절장치는 통상 EDID 등의 사용에 대해 제한된다. 도 1 은 종래 기술에 따른 그래픽 프로세서 조절장치 (102, 104) 의 현재 상태를 도시한다. 도시된 바와 같이, 일반적으로, 이러한 그래픽 프로세서 조절장치 (102, 104) 는 통상 개별적인 입력 및 출력 파라미터들에 기초한다.
따라서, 종래 기술에 관련되는 이러한 문제 및/또는 다른 제한들을 극복하는 것이 필요하다.
프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 애스펙트를 조절하기 위한 시스템, 방법, 및 컴퓨터 프로그램 제품이 제공된다. 일반적으로, 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 입력 파라미터 및 하나 이상의 출력 파라미터가 식별된다. 그 후, 이에 따라, 프로그 래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 애스펙트가 동적으로 조절될 수도 있다. 이러한 조절장치는 하나 이상의 입력 파라미터 및 하나 이상의 출력 파라미터 모두의 작용으로 수행된다.
도 2 는, 일 실시형태에 따라서 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 애스펙트를 조절하기 위한 방법 (200) 을 나타낸다. 본 상세한 설명에서, 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서란 조절될 수 있는 하나 이상의 애스펙트를 가지는 임의의 하드웨어 그래픽 및/또는 오디오 프로세서를 지칭한다.
예로서, 그래픽 프로세서가 제공된 일 실시형태에서, 그래픽 프로세서는 그래픽 프로세싱 유닛 (GPU; graphics processing unit) 을 포함할 수도 있다. 다른 예시적인 프로그래밍 가능한 그래픽 프로세서 및 관련 환경에 대한 더 많은 정보는 도 6 을 참조하여 더욱 상세하게 설명된다. 한편, 오디오 프로세서가 제공된 일 실시형태에서, 오디오 프로세서는 오디오 카드, 내장 오디오 프로세서 등의 형태로 제공될 수도 있다.
동작 (202) 에서 나타난 바와 같이, 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 입력 파라미터 및 하나 이상의 출력 파라미터가 식별된다. 본 상세한 설명에서, 이러한 파라미터는 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 입력 및 출력에 관련된 임의의 하드웨어, 코드, 및/또는 데이터를 지칭할 수도 있다.
예로서, 그래픽 프로세서가 제공된 일 실시형태에서, 입력 파라미터는 프로 그래밍 가능한 그래픽 프로세서에 의해 처리되는 콘텐츠와 관련될 수도 있고, 출력 파라미터는 콘텐츠를 디스플레이하기 위해 이용되는 디스플레이 디바이스와 관련될 수도 있다. 물론, 이들 예는 단순히 예시의 목적을 위해 설명되고, 임의의 방법에 의해 제한하는 것으로 해석되지 않아야 한다. 또한, 이러한 파라미터들의 식별은 후술하는 방식으로 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 조절을 허용하는 임의의 소정의 방법으로 달성될 수도 있다.
상세하게, 동작 (204) 에서는, 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 애스펙트가 하나 이상의 입력 파라미터 및 하나 이상의 출력 파라미터에 기초하여 조절될 수도 있다. 예로서, 다시, 그래픽 프로세서가 제공된 일 실시형태에서, 그래픽 프로세서의 이러한 애스펙트는 하나 이상의 셰이더에 관련될 수도 있다. 셰이더는, 몇몇 실시형태에서 렌더링되는 대상물 또는 이미지의 표면 특성을 결정하기 위해 이용되는 프로그램 (예를 들어, 버텍스 프로그램, 픽셀 프로그램 등) 을 포함하고, 광 흡수, 확산, 텍스쳐 매핑, 반사, 굴절, 쉐도잉 (shadowing), 표면 이동, 후-처리 효과, 및/또는 이 문제에 대한 임의의 다른 소정의 표면 특성을 설명할 수 있다. 또한, 전술한 셰이더는 다른 실시형태에서 비디오 프로세싱 용으로 이용될 수도 있다.
물론, 다른 실시형태에서, 조절되는 그래픽 프로세서의 애스펙트는, 이하의 표 1 에 설명된 다양한 애스펙트들을 포함하지만 이에 한정되는 것은 아니다. 나타낸 바와 같이, 복수의 일반적인 카테고리의 상이한 양태들은 그 특정한 예들뿐만 아니라 이러한 예시적인 애스펙트가 조절될 수 있는 콘텐츠에 관한 도면과 함께 개시된다.
애스펙트의 일반적인 카테고리 응용시, 일반적인 애스펙트의 특정 예시들 하나 이상의 특정 예시에 대한 조절장치의 설명
비디오 프로세싱 감마 (gamma) 테이블 모션 평가 또는 보상 색상 공간 제어 룩 업 테이블 기타 (예를 들어, 오버레이, 스케일링, 인코딩, 등) 감마는 콘텐츠 및/또는 디스플레이에 관한 감마 레벨에 기초하여 조절될 수도 있다. 모션 평가 또는 보상은 프레임 레이트 제어, 디-인터레이싱, 및/또는 잡음 감소를 위해 조절될 수도 있다. 색상 공간 제어는 애스펙트 비율 전환, 해상도, 매칭 등을 위해 조절될 수도 있다. 룩 업 테이블은 색상 또는 감마 보정을 위해 조절될 수도 있다.
그래픽 프로세싱 픽셀 프로세싱 버텍스 프로세싱 텍스쳐링 텍스쳐링 알고리즘 및 관련 품질은 디스플레이의 콘텐츠 및 성능에 기초하여 조절될 수도 있다.
타이밍 동기식 발생 픽셀 클록 튜닝 그래픽 프로세서의 타이밍은 디스플레이의 유형에 기초하여 조절될 수도 있다 (예를 들어, 디스플레이가 소정의 리프레시 레이트를 요구하는 경우, 그래픽 프로세서 타이밍은 불필요한 프로세싱들을 피하기 위해 동일하게 매칭하도록 조절될 수도 있다).
그래픽 프로세서로 오프로딩하는 레벨 소프트웨어 어플리케이션 진단 오프로딩은, 중앙 처리 장치 사용이 특별히 요구되는 경우 (예를 들어, DVD 등을 볼 때 전자 메일을 다운로딩하는 경우) 에 증가될 수도 있다.
다시, 이러한 예들은 예시적인 목적으로만 설명되고, 임의의 방식에 제한하는 것으로 해석되지 않아야 한다. 이에 대해, 그래픽 프로세서의 임의의 애스펙트는 임의의 방식으로 조절되어 픽셀 (비디오 및/또는 그래픽) 조작 등이 달성될 수도 있다.
조절장치는 하나 이상의 입력 파라미터 및 하나 이상의 출력 파라미터 모두의 작용으로 수행된다. 예를 들어, 몇몇 실시형태에서, 조절장치 (및 그에 따른 결과물인 프로세싱 등) 는 입력 및 출력 파라미터 모두에 연결될 수도 있다. 도 3 은 일 실시형태에 따른 그래픽 및/또는 오디오 프로세서 조절장치 (302) 를 도시한다. 도시된 바와 같이, 단일의 그래픽 프로세서 조절장치 (302) 는 입력 및 출력 파라미터 모두에 동시에 기초할 수도 있다.
사용자들의 요구에 의해 전술한 프레임워크가 구현, 또는 구현되지 않을 수도 있는 다양한 부가적 아키텍쳐 및 특성에 관하여 더욱 상세한 정보가 이하 설명된다. 이하의 정보는 예시적인 목적으로 설명되고 임의의 방식에 제한하는 것으로 해석되지 않아야 한다.
예를 들어, 일 부가적인 실시형태에서, 전술한 조절장치가 동적으로 수행될 수도 있다. 본 발명의 상세한 설명에서, 이러한 동적 조절장치는 기동 및/또는 초기 구성 이후에 이루어지는 2 개 이상의 조절장치를 지칭한다. 예를 들어, 이하 부연설명되는 일 예시적인 실시형태에서, 조절은 하나 이상의 전술한 파라미터 변화 하에서, 그래픽 프로세서의 하나 이상의 애스펙트의 조절을 업데이트함으로써 동적으로 수행될 수도 있다.
다른 예로서, 이하의 실시형태들은 주로 그래픽 프로세서에 대해 설명된다. 물론, 임의의 이러한 특징들은 오디오 프로세서 환경에서 적용될 수도 있지만, 그렇지 않을 수도 있다. 또한, (그래픽 프로세싱 능력을 가지거나 또는 가지지 않는) 비디오 프로세서가 제공된 일 실시형태가 고려된다.
이를 위해, 임의의 이하의 특징이 설명된 다른 특징을 배제하거나 또는 배제하지 않고 부가적으로 통합될 수도 있다.
도 4 는, 일 실시형태에 따른 프로그래밍 가능한 그래픽 프로세서의 하나 이상의 애스펙트를 조절하기 위한 방법 (400) 을 나타낸다. 옵션으로, 이 방법 (400) 은 도 2 의 방법 (200) 으로 수행될 수도 있다. 그러나, 물론, 방법 (400) 은 임의의 소정 환경에서 수행될 수도 있다. 또한, 상기 정의들이 이하의 설명에 적용된다.
도시된 바와 같이, 상이한 소스들로부터의 다양한 입/출력 파라미터들이 일 실시형태에 따른 프로그래밍 가능한 그래픽 프로세서의 하나 이상의 애스펙트를 조절하도록 이용된다. 파라미터들의 특정 소스가 도 4 에 도시되고, 이 도면은 (소스가 도시되거나 도시되지 않은) 몇몇 소스들이 제공된다.
특히, 프로파일은 동작 (406) 에서 식별된다. 옵션으로, 사용자는 그 자신의 프로파일을 정의할 수도 있고, 또한, 복수의 사전-정의된 프로파일로부터 선택될 수도 있다. 또한, 이러한 프로파일은 특정 동작 특성 (예를 들어, 전력, 성능 등) 에 각각 관련될 수도 있다. 예를 들어, 사용자는, 어떤 그래픽 및/또는 비디오 프로세싱 능력이 활성화되도록 요구할 수도 있고, 그로 인해, 일정 배터리 수명이 요구된다. 또한, 사용자가 특정 옵션을 구체화하는 것 대신에, 사용자는 단순히 시스템을 소정의 방식으로 동작하도록 구성하여, 관련되는 옵션이 자동적으로 식별되고 프로파일의 형태로 저장될 수도 있다.
일 가능한 실시형태에서, 제 1 프로파일은 성능을 희생하여 전력을 유지하도록 구성될 수도 있고, 제 2 프로파일은 전력을 희생하여 성능을 최적화하도록 구성될 수도 있다. 이에 대해, 사용의 일 예시로서, 제 1 프로파일이 제 2 프로파일에 관하여 그래픽 프로세서를 이용하는 동안 적은 전력을 요구하기 때문에, 배터리 모드의 플레인 (plane) 상에서 DVD 를 구동시키고 있는 사용자는 제 1 프로파일을 선택할 수도 있다. 이용되는 다른 예에서, AC 모드에서 그래픽-집중 게임을 구동시키고 있는 사용자는 제 2 프로파일을 선택할 수도 있다.
또한, 동작 (404) 의 제어 패널을 통해서 파라미터들이 수신될 수도 있다. 이러한 제어 패널은 사용자가 동작 특징들을 상세하게 결정하도록 할 수도 있다. 일 부가적인 실시형태에서, 제어 패널은 사용자가 동작 (406) 을 통해서 그래픽 프로세서가 동작하는 프로파일을 선택하도록 할 수도 있다.
또한, 디스플레이 디바이스에 구체적으로 관련되는 부가적인 파라미터들은 비디오 전자 표준 협회 (VESA) 에 의해 정의된 확장된 표시 식별 데이터 (EDID) 를 이용하여 수집될 수도 있다. 동작 (408) 참조. 전술한 바와 같이, 이러한 EDID 는 벤더 정보, 최대 이미지 크기, 색상 특성, 팩토리 사전설정 타이밍, 주파수 범위 한계, 및 출력 디스플레이 명칭, 일련 번호 등을 위한 특징 문자열을 포함할 수도 있다.
또한, 일 실시형태에서, 이러한 EDID 는 강화될 수도 있고, 또는, 관련 애스펙트의 비율, 디스플레이 디바이스가 넓은 스크린 포맷을 가지는지의 여부를 나타내는 표시, 기본 해상도 정보, 디스플레이 디바이스가 사실상 고유하게 인터레이싱 (interlacing) 하는지 또는 프로그래시브 (progressive) 하는지의 여부를 나타내는 표시, 디스플레이 디바이스의 색상 특성, 디스플레이 디바이스의 주파수 응답, 디스플레이 디바이스가 인터레이싱 포맷 또는 프로그래시브 포맷을 가지는지의 여부에 관한 표시 등과 같은 부가적인 파라미터들을 포함하는 데이터 구조로 대체될 수도 있다. 물론, 이러한 예들은 예시적인 목적으로 설명되고, 디스플레이 (예를 들어, 응답 시간, 픽셀 피치 등) 과 관련된 임의의 파라미터가 이용될 수도 있다면, 한정적인 의미로 파악되지 않아야만 한다. 이러한 정보를 획득하기 위해, 디스플레이 디바이스 자체 (및/또는 관련 드라이버 등) 에 대한 질의가 이루어질 수도 있다.
또한, 동작 (416) 에서 다른 파라미터들이 센서를 통해서 제공될 수도 있다. 일 부가적인 실시형태에서, 이러한 센서는 특정 시스템을 둘러싸고 있는 환경에서 광량을 식별할 수 있는 외부 센서의 형태를 취할 수도 있다. 물론, 임의의 외부 파라미터 (예를 들어, 주변 잡음, AC 전원의 존재, 이동 등) 는 관련 파라미터들을 제공하기 위해 센서에 의해 검출될 수도 있다. 또한, 검출될 수도 있는 에지, 스캔 구조, 색상 공간, 애스펙트 비, 콘트라스트 비 등을 포함하지만 이들에 한정하지 않는 다양한 파라미터를 검출하기 위해 하나 이상의 센서가 채용될 수도 있다.
이에 대해, 동작 (404, 406, 408 및/또는 416) 의 입/출력 파라미터는 그래픽 프로세서의 관련 조절가능한 애스펙트를 식별하기 위해 동일하게 이용될 수 있는 로직 (410) 에 공급된다. 동작 (411) 참조. 예를 들어, 전력-관련 파라미터와 관련하여, 전력에 영향을 주는 (즉, 추가적인 전력을 요구하는 등) 그래픽 프로세서의 애스펙트가 조절의 목적으로 식별될 수도 있다. 이와 유사하게, 성능과 관련된 파라미터와 관련하여, 성능에 영향을 주는 그래픽 프로세서의 애스펙트가 조절의 목적으로 식별될 수도 있다.
다른 실시형태에서, 입력 파라미터 및 출력 파라미터는 이들 파라미터가 그래픽 프로세서에 대한 상반되는 조절로 잠재적으로 유도되는 지의 여부를 결정하도록 검토될 수도 있다. 예를 들어, 사용자 프로파일은 리소스-집중 진보된 그래픽 (resource-intensive advanced graphics) 및/또는 비디오 프로세싱을 요구할 수도 있고, 제어 패널 선택은 전력 절약의 일정량을 요구할 수도 있다. 이러한 상황에서, 동작 (404, 406, 408 및/또는 416) 에서 수신된 입력 파라미터 각각에 할당된 우선순위-레벨 등 (또는, 이러한 문제에 대한 임의의 다른 규칙-기반 로직) 이 그래픽 프로세서를 적절하게 조절하도록 이용될 수도 있다.
이러한 입/출력 파라미터에 의하면, 그래픽 프로세서는 콘텐츠가 동작 (415) 에서 처리되고 존재할 수 있도록, 동작 (414) 에서 조절될 수 있다. 사용중에, 전술한 외부 파라미터가 변화할 수도 있기 때문에, 센서로부터의 정보는 도 4 에 도시된 방법으로 로직 (410) 으로 다시 피드백될 수도 있다. 따라서, 상기 환경에서의 임의의 변화의 관점에서, 동작 (415) 의 프리젠테이션을 최적화하기 위해, 로직 (410) 은 동작 (411 및 414) 에서 그래픽 프로세서의 적절한 파라미터 및 조절을 (사용자 간섭을 통해서 또는 통하지 않고) 자동적으로 업데이트시킬 수도 있다.
다양한 전술된 동작은 그래픽 프로세서, 중앙 처리 장치, 전용 회로, 및/또는 임의의 다른 소정의 로직과 관련하는 임의의 소프트웨어 및/또는 하드웨어에 의해 수행될 수도 있다. 이하, 상기 방법으로 수행될 수도 있는 일 예시적인 알고리즘에 관련하여 더욱 상세한 정보가 설명된다.
도 5 는 다른 실시형태에 따라서 프로그래밍 가능한 그래픽 프로세서의 하나 이상의 애스펙트를 조절하기 위한 방법 (500) 을 도시한다. 옵션으로, 이 방법 (500) 은 도 2 내지 도 4 의 방법으로 구현될 수도 있다. 그러나, 물론, 방법 (500) 은 임의의 소정의 환경에서 수행될 수도 있다. 다양한 동작의 특정 순서가 이하 나타나고, 이는, 임의의 다른 순서 (또는 대등한 동작) 도 채용될 수도 있음이 명시된다.
도시된 바와 같이, 프로그래밍 가능한 그래픽 프로세서에 의해 처리되는 콘텐츠는 동작 (502) 에서 소스로부터 수신된다. 다음으로, 이러한 콘텐츠는 콘텐츠에 관련되는 하나 이상의 입력 파라미터를 식별할 목적으로 동작 (504) 에서 검사된다. 이러한 입력 파라미터(들) 은 임의의 소정의 방식 (예를 들어, 발견적 방식 등) 으로 식별될 수도 있다. 일 실시형태에서, 이러한 입력 파라미터는 콘텐츠의 크기, 콘텐츠가 아날로그 포맷을 가지는지 또는 디지털 포맷을 가지는지에 관한 표시, 콘텐츠가 인터레이싱 포맷을 가지는지 또는 프로그래시브 포맷을 가지는지에 관한 표시, 콘텐츠가 잡음을 나타내는지에 관한 표시 등을 포함하지만, 이에 한정되지 않는다. 물론, 이 콘텐츠와 관련되는 임의의 다른 파라미터는, 콘텐츠가 비디오에서 유래되었는지 또는 필름에서 유래되었는지의 여부; 이 콘텐츠와 관련된 유연성 (softness), 임의의 링잉 (ringing), 교차 색상의 결정 등으로 식별된다.
다음으로, 디스플레이 디바이스는 그와 관련된 하나 이상의 출력 파라미터를 식별하도록 점검된다. 동작 (506) 참조. 물론, 임의의 전술한 출력 파라미터가 식별될 수도 있다. 또한, 이 출력 파라미터(들) 은 전술한 바와 같이 EDID 를 이용하여 식별될 수도 있다.
이하, 동작 (508) 에서, 입력 및 출력 파라미터가 매핑되어 그래픽 프로세서가 조절되는 적절한 방식을 결정한다. 이에 대해, 조절된 그래픽 프로세서는 관련된 입력 및 출력 파라미터 모두에 관하여 최적화될 수 있는 방식으로 디스플레이를 통해서 콘텐츠를 처리할 수도 있다. 동작 (510 - 512) 참조. 옵션으로, 동작 (508) 에서 결정된 조절은 이후의 기회 (예를 들어, 특히, 동일한 콘텐츠가 동일한 디스플레이 디바이스 상에 디스플레이되는 경우, 등) 에 재사용될 목적으로 (가능한 한 프로파일로) 룩 업 테이블에 저장될 수도 있다.
따라서, 이 기술은 입/출력 파라미터에 기초하여 그래픽 (뿐만 아니라 비디오) 프로세싱에 맞는 다양한 상황에 이용될 수도 있다. 일 예에서, 사용자는 평면상에서 영화를 보기 위해 랩 탑을 이용할 수도 있다. 이 시나리오는 사용자가 상대적으로 작은 컴퓨터 LCD 디바이스에서 영화를 볼 경우도 수반할 수도 있다. 결과적으로, 요구되는 비디오 프로세싱은, 예를 들어, 큰 고해상도 디스플레이 상에서 콘텐츠를 플레이할 때 요구되는 것보다 훨씬 덜 요구될 수도 있다. 따라서, 높은 품질의 프로세싱 및 메모리 집중 조작은 요구되지 않을 수도 있다. 다른 예에서, 진보된 디-인터레이싱은, 더 많은 기본적인 디-인터레이싱 프로세스가 비디오 품질의 최소 절충물을 통해서 충족되는 경우에는 필요하지만, 그래픽 프로세서에 의해 이용되는 작은 전력을 통해서 충족되는 경우에는 필요하지 않을 수도 있다.
도 6 은 다양한 이전 실시형태의 다양한 아키텍쳐 및/또는 기능이 구현될 수도 있는 일 예시적인 컴퓨터 시스템 (600) 을 도시한다. 도시된 바와 같이, 통신 버스 (602) 에 접속되는 하나 이상의 호스트 프로세서 (601) 를 포함하는 컴퓨터 시스템 (600) 이 제공된다. 또한, 컴퓨터 시스템 (600) 은 메인 메모리 (604) 를 포함한다. 제어 로직 (소프트웨어) 및 데이터는 RAM (random access memory) 일 수도 있는 메인 메모리 (604) 내에 저장된다.
또한, 컴퓨터 시스템 (600) 은 그래픽 프로세서 (606) 및 디스플레이 디바이스 (608), 즉, 컴퓨터 모니터를 포함한다. 일 실시형태에서, 그래픽 프로세서 (606) 는 복수의 셰이더 모듈, 래스터화 모듈, 비디오 프로세싱 모듈 등을 포함할 수도 있다. 전술한 모듈 각각은 그래픽 프로세싱 유닛 (GPU) 을 형성하도록 단일 반도체 플랫폼상에 위치될 수도 있다.
이 설명에서, 단일 반도체 플랫폼은 단일 단위의 반도체-기반 집적 회로 또는 칩을 지칭할 수도 있다. 또한, 용어 단일 반도체 플랫폼은 온-칩 동작을 시뮬레이션하고, 종래의 CPU 및 버스 구현을 이용하여 상당한 개선을 이루는 증가된 연결성을 가지는 멀티-칩 모듈을 지칭할 수도 있다. 물론, 다양한 모듈은 사용자의 희망에 따라서 반도체 플랫폼을 분리하여 또는 다양하게 조합하여 위치시킬 수도 있다.
또한, 컴퓨터 시스템 (600) 은 보조 저장장치 (610) 를 포함할 수도 있다. 예를 들어, 보조 저장장치 (610) 는 하드 디스크 드라이브 및/또는 플로피 디스크를 나타내는 제거가능한 저장 드라이브, 자기 테이프 드라이브, 콤팩트 디스크 드라이브 등을 포함한다. 제거가능한 저장 드라이브는 널리 공지된 방법으로 제거가능한 저장 유닛으로부터 판독하고 및/또는 제거가능한 저장 유닛으로 기록한다.
컴퓨터 프로그램, 또는 컴퓨터 제어 로직 알고리즘은 메인 메모리 (604) 및/또는 보조 저장장치 (610) 에 저장될 수도 있다. 실행시에 이러한 컴퓨터 프로그램은 컴퓨터 시스템 (600) 이 다양한 기능을 수행할 수 있게 한다. 메인 메모리 (604), 보조 저장장치 (610) 및/또는 임의의 다른 저장장치는 컴퓨터-판독가능 매체의 이용가능한 예들이다.
일 실시형태에서, 다양한 이전 도면의 구조 및/또는 기능성은 호스트 프로세서 (601), 그래픽 프로세서 (606), 칩세트 (즉, 작업하도록 설계되고 관련 기능 등을 수행하기 위한 유닛으로 판매된 집적 회로의 일 그룹), 및/또는 이를 위한 임의의 다른 집적 회로로 구현될 수도 있다.
또한, 다양한 이전 도면의 구조 및/또는 기능성은 범용 컴퓨터 시스템, 회로 기판 시스템, 엔터테인먼트 목적으로 전용된 게임 콘솔 시스템, 어플리케이션-특정 시스템, 및/또는 임의의 다른 소정의 시스템으로 구현될 수도 있다.
다양한 실시형태에 대해 설명하였지만, 이들은 단지 예로 설명되었고, 여기에 한정하는 것은 아니다. 따라서, 바람직한 실시형태의 폭 및 범위는 임의의 전술한 예시적인 실시형태에 의해 한정되지 않고, 이하의 청구범위 및 이들 동등물에 따라서만 정의될 수 있다.
본 발명에 따르면, 다양한 구조 및/또는 기능성은 범용 컴퓨터 시스템, 회로 기판 시스템, 엔터테인먼트 목적으로 전용된 게임 콘솔 시스템, 어플리케이션-특정 시스템, 및/또는 임의의 다른 소정의 시스템으로 구현될 수도 있어서, 종래 기술에 관련되는 이러한 문제 및/또는 다른 제한들을 극복하기 위한 해결책이 제시된다.

Claims (20)

  1. 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 입력 파라미터 및 하나 이상의 출력 파라미터를 식별하는 단계; 및
    상기 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서의 하나 이상의 애스펙트를 동적으로 조절하는 단계를 포함하며,
    상기 조절은 상기 하나 이상의 입력 파라미터 및 상기 하나 이상의 출력 파라미터 모두의 작용으로 수행되는, 방법.
  2. 제 1 항에 있어서,
    상기 프로그래밍 가능한 그래픽 및/또는 오디오 프로세서는 그래픽 프로세서를 포함하는, 방법.
  3. 제 2 항에 있어서,
    상기 하나 이상의 입력 파라미터는 상기 프로그래밍 가능한 그래픽 프로세서에 의해 처리되는 콘텐츠와 관련되는, 방법.
  4. 제 3 항에 있어서,
    상기 하나 이상의 입력 파라미터는, 상기 콘텐츠의 크기, 상기 콘텐츠가 아날로그 포맷을 가지는지 또는 디지털 포맷을 가지는지에 대한 표시, 상기 콘텐츠가 인터레이싱 포맷을 가지는지 또는 프로그래시브 포맷을 가지는지에 대한 표시, 및 상기 콘텐츠가 잡음을 나타내는지의 여부에 대한 표시로 이루어진 그룹으로부터 선택되는, 방법.
  5. 제 2 항에 있어서,
    상기 하나 이상의 출력 파라미터는 디스플레이 디바이스와 관련되는, 방법.
  6. 제 5 항에 있어서,
    상기 하나 이상의 출력 파라미터는, 상기 디스플레이 디바이스의 해상도, 상기 디스플레이 디바이스의 색상 특성, 상기 디스플레이 디바이스의 주파수 응답, 및 상기 디스플레이 디바이스가 인터레이싱 포맷을 가지는지 또는 프로그래시브 포맷을 가지는지에 대한 표시로 이루어진 그룹으로부터 선택되는, 방법.
  7. 제 5 항에 있어서,
    상기 하나 이상의 출력 파라미터는 확장된 디스플레이 식별 데이터를 이용하여 식별되는, 방법.
  8. 제 2 항에 있어서,
    상기 하나 이상의 출력 파라미터는 외부 센서를 이용하여 식별되는, 방법.
  9. 제 2 항에 있어서,
    상기 출력 파라미터 및 상기 입력 파라미터 중 하나 이상은 제어 패널을 이용하여 식별되는, 방법.
  10. 제 2 항에 있어서,
    상기 출력 파라미터 및 상기 입력 파라미터 중 하나 이상은 프로파일에 기초하여 식별되는, 방법.
  11. 제 10 항에 있어서,
    상기 프로파일은 사용자-정의되는, 방법.
  12. 제 10 항에 있어서,
    상기 프로파일은 사용자에 의해 복수의 프로파일로부터 선택되는, 방법.
  13. 제 10 항에 있어서,
    제 1 프로파일은 제 2 프로파일에 대한 상기 그래픽 프로세서의 사용중에 적은 전력을 요구하는, 방법.
  14. 제 1 항에 있어서,
    상기 조절은 이후의 사용을 위해 프로파일로서 저장되는, 방법.
  15. 제 2 항에 있어서,
    조절되는 상기 그래픽 프로세서의 하나 이상의 애스펙트는 셰이더 및 비디오 프로세싱 모듈 중 하나 이상에 관련되는, 방법.
  16. 제 2 항에 있어서,
    조절되는 상기 그래픽 프로세서의 하나 이상의 애스펙트는 상기 그래픽 프로세서의 타이밍, 상기 그래픽 프로세서의 비디오 프로세싱, 및 상기 그래픽 프로세서의 그래픽 프로세싱으로 이루어진 그룹으로부터 선택되는, 방법.
  17. 제 1 항에 있어서,
    상기 조절은, 하나 이상의 상기 파라미터 변화시에, 상기 그래픽 프로세서의 상기 하나 이상의 애스펙트의 조절을 업데이트함으로써 동적으로 수행되는, 방법.
  18. 컴퓨터 판독가능 매체 상에서 구현되는 컴퓨터 프로그램 제품으로서,
    오디오, 그래픽 또는 비디오 프로세싱에 이용가능한 프로그래밍 가능한 프로세서의 하나 이상의 입력 파라미터 및 하나 이상의 출력 파라미터를 식별하기 위한 컴퓨터 코드; 및
    상기 프로그래밍 가능한 프로세서의 하나 이상의 애스펙트를 동적으로 조절하기 위한 컴퓨터 코드를 포함하며,
    상기 조절은 상기 하나 이상의 입력 파라미터 및 상기 하나 이상의 출력 파라미터 모두의 작용으로서 수행되는, 컴퓨터 프로그램 제품.
  19. 그래픽 또는 비디오 프로세싱에 이용가능한 프로그래밍 가능한 프로세서를 포함하고,
    상기 프로그래밍 가능한 프로세서는, 상기 프로그래밍 가능한 프로세서의 하나 이상의 입력 파라미터 및 하나 이상의 출력 파라미터 모두의 작용으로서 조절이 수행되는 방식으로 조절되는, 시스템.
  20. 제 19 항에 있어서,
    상기 프로세서는 버스를 통해서 중앙 처리 장치와 통신하는, 시스템.
KR1020070059144A 2006-06-16 2007-06-15 입력 및 출력 파라미터에 기초하여 프로그래밍 가능한그래픽/오디오 프로세서를 조절하기 위한 시스템, 방법, 및컴퓨터 프로그램 제품 KR100942856B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/454,546 US8203563B2 (en) 2006-06-16 2006-06-16 System, method, and computer program product for adjusting a programmable graphics/audio processor based on input and output parameters
US11/454,546 2006-06-16

Publications (2)

Publication Number Publication Date
KR20070120069A true KR20070120069A (ko) 2007-12-21
KR100942856B1 KR100942856B1 (ko) 2010-02-17

Family

ID=38861080

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070059144A KR100942856B1 (ko) 2006-06-16 2007-06-15 입력 및 출력 파라미터에 기초하여 프로그래밍 가능한그래픽/오디오 프로세서를 조절하기 위한 시스템, 방법, 및컴퓨터 프로그램 제품

Country Status (4)

Country Link
US (1) US8203563B2 (ko)
KR (1) KR100942856B1 (ko)
CN (1) CN101136190B (ko)
TW (1) TWI363313B (ko)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9113176B2 (en) * 2007-08-29 2015-08-18 The Regents Of The University Of California Network and device aware video scaling system, method, software, and device
US8121197B2 (en) 2007-11-13 2012-02-21 Elemental Technologies, Inc. Video encoding and decoding using parallel processors
US9177368B2 (en) * 2007-12-17 2015-11-03 Nvidia Corporation Image distortion correction
JP4636143B2 (ja) * 2008-08-29 2011-02-23 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US8614709B2 (en) * 2008-11-11 2013-12-24 Microsoft Corporation Programmable effects for a user interface
US8749662B2 (en) 2009-04-16 2014-06-10 Nvidia Corporation System and method for lens shading image correction
US9165394B2 (en) 2009-10-13 2015-10-20 Nvidia Corporation Method and system for supporting GPU audio output on graphics processing unit
US9070198B2 (en) * 2011-09-30 2015-06-30 Ati Technologies Ulc Methods and systems to reduce display artifacts when changing display clock rate
JP2013134386A (ja) * 2011-12-27 2013-07-08 Funai Electric Co Ltd 画像出力装置、表示装置
US20140192207A1 (en) * 2013-01-07 2014-07-10 Jinsong Ji Method and apparatus to measure video characteristics locally or remotely
US20150189126A1 (en) * 2014-01-02 2015-07-02 Nvidia Corporation Controlling content frame rate based on refresh rate of a display
US9569199B2 (en) * 2015-01-22 2017-02-14 Futurewei Technologies, Inc. Systems and methods to update source code files
US9940688B2 (en) 2015-06-04 2018-04-10 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Video adapter alignment

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0258740B1 (en) * 1986-09-02 1995-07-19 Fuji Photo Film Co., Ltd. Method of and apparatus for processing an image with gradation correction of video signal
US5606348A (en) * 1995-01-13 1997-02-25 The United States Of America As Represented By The Secretary Of The Army Programmable display interface device and method
US6496190B1 (en) * 1997-07-02 2002-12-17 Mental Images Gmbh & Co Kg. System and method for generating and using systems of cooperating and encapsulated shaders and shader DAGs for use in a computer graphics system
KR200160668Y1 (ko) * 1997-12-16 1999-11-15 윤종용 평판 디스플레이 장치 및 이를 사용하는 디지탈 데이터 처리 장치
US7009616B2 (en) * 2000-05-22 2006-03-07 Silicon Graphics, Inc. Multi-mode display
US7138989B2 (en) * 2000-09-15 2006-11-21 Silicon Graphics, Inc. Display capable of displaying images in response to signals of a plurality of signal formats
KR100388840B1 (ko) 2001-02-19 2003-06-25 이디텍 주식회사 디스플레이 처리장치 및 그 제어방법
US6801811B2 (en) * 2001-12-27 2004-10-05 Hewlett-Packard Development Company, L.P. Software-directed, energy-aware control of display
US20030201990A1 (en) * 2002-04-16 2003-10-30 Aldrich Bradley C. Color adaptation for multimedia devices
US6797998B2 (en) * 2002-07-16 2004-09-28 Nvidia Corporation Multi-configuration GPU interface device
KR100841096B1 (ko) * 2002-10-14 2008-06-25 리얼네트웍스아시아퍼시픽 주식회사 음성 코덱에 대한 디지털 오디오 신호의 전처리 방법
US20040212610A1 (en) * 2003-04-25 2004-10-28 Dell Products L.P. Method and apparatus for associating display configuration information with respective displays of an information handling system
US20050104899A1 (en) * 2003-11-19 2005-05-19 Genesis Microchip Inc. Real time data stream processor
US7420618B2 (en) * 2003-12-23 2008-09-02 Genesis Microchip Inc. Single chip multi-function display controller and method of use thereof
US20060012604A1 (en) * 2004-07-15 2006-01-19 Avinash Seetharamaiah Legacy processing for pixel shader hardware
US8407594B2 (en) * 2004-07-22 2013-03-26 Sony Corporation System and method for dynamically establishing extended display identification data
US7471336B2 (en) * 2005-02-18 2008-12-30 Genesis Microchip Inc. Global motion adaptive system with motion values correction with respect to luminance level
US7602408B2 (en) * 2005-05-04 2009-10-13 Honeywood Technologies, Llc Luminance suppression power conservation

Also Published As

Publication number Publication date
CN101136190B (zh) 2012-07-04
US8203563B2 (en) 2012-06-19
US20070291038A1 (en) 2007-12-20
KR100942856B1 (ko) 2010-02-17
CN101136190A (zh) 2008-03-05
TW200825981A (en) 2008-06-16
TWI363313B (en) 2012-05-01

Similar Documents

Publication Publication Date Title
KR100942856B1 (ko) 입력 및 출력 파라미터에 기초하여 프로그래밍 가능한그래픽/오디오 프로세서를 조절하기 위한 시스템, 방법, 및컴퓨터 프로그램 제품
US8451279B2 (en) System, method and computer program product for adjusting a refresh rate of a display
TWI423198B (zh) 依據環境光之亮度調整畫面灰階度的顯示裝置及方法
JP4746632B2 (ja) 表示リフレッシュを制御する方法、装置、システムおよびプログラム
US7119786B2 (en) Method and apparatus for enabling power management of a flat panel display
US11295703B2 (en) Displays with content-dependent brightness adjustment
US20060250385A1 (en) Luminance suppression power conservation
US8648868B2 (en) Color correction to facilitate switching between graphics-processing units
CN106919401A (zh) 一种动态调节分辨率的方法、装置及移动终端
US20210027722A1 (en) Adaptive Low Power Touch and Display Device
KR101136195B1 (ko) 평판 디스플레이에서의 결함 화소 관리
JP2020513581A (ja) ディスプレイ装置及びディスプレイ方法
CN113674712B (zh) 显示屏背光矫正方法、装置、系统及存储介质及显示系统
US20160161959A1 (en) Thermal management method and electronic system with thermal management mechanism
CN113870805B (zh) 背光控制方法、设备、系统及存储介质
WO2017098676A1 (ja) 表示装置およびバックライトの制御方法
CN106933329B (zh) 一种移动终端适配节能等级的方法、装置及移动终端
US10319268B2 (en) Ambient light color compensating device
JP2009205127A (ja) 液晶表示装置の制御方法、液晶表示装置および電子機器
JP5903283B2 (ja) 画像処理装置、画像表示システム、および画像表示方法
CN115116390A (zh) 亮度补偿方法、装置、电子设备及存储介质
WO2019239918A1 (ja) 制御装置、表示装置および制御方法
WO2019239903A1 (ja) 制御装置、表示装置および制御方法
JP2010139678A (ja) 表示駆動装置
CN117198233B (zh) 彩色电子墨水屏一体机画面显示方法及相关设备

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee