KR19980034111A - 격주사선 화소를 이용한 형상 부호화 방법 및 장치 - Google Patents
격주사선 화소를 이용한 형상 부호화 방법 및 장치 Download PDFInfo
- Publication number
- KR19980034111A KR19980034111A KR1019960052066A KR19960052066A KR19980034111A KR 19980034111 A KR19980034111 A KR 19980034111A KR 1019960052066 A KR1019960052066 A KR 1019960052066A KR 19960052066 A KR19960052066 A KR 19960052066A KR 19980034111 A KR19980034111 A KR 19980034111A
- Authority
- KR
- South Korea
- Prior art keywords
- scan line
- exclusive
- immediately
- pixel value
- immediately before
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03K—PULSE TECHNIQUE
- H03K19/00—Logic circuits, i.e. having at least two inputs acting on one output; Inverting circuits
- H03K19/20—Logic circuits, i.e. having at least two inputs acting on one output; Inverting circuits characterised by logic function, e.g. AND, OR, NOR, NOT circuits
- H03K19/21—EXCLUSIVE-OR circuits, i.e. giving output if input signal exists at only one input; COINCIDENCE circuits, i.e. giving output only if all input signals are identical
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
격주사선 화소를 이용한 영상 혹은 형상 부호화방법 및 장치가 개시된다. 형상 부호화방법에서는 영상 혹은 상기 영상의 형상을 부호화함에 있어서, 상기 영상 혹은 형상의 소정 프레임에서 현재 주사선의 각 화소들에 대한 부호화 여부를 상기 현재 주사선의 각 행에 해당하는 직전 주사선의 각 행의 화소와 직후 주사선의 각 행의 화소를 이용하여 결정하는 단계와, 그 결과, 현재 주사선의 해당 화소를 부호화하는 단계로 이루어진다. 따라서, 현재의 주사선에 대한 직전, 직후 주사선의 화소들에 대하여 배타논리합 연산을 수행하여, 직전, 직후 주사선의 화소값이 서로 다른 경우에만 현재 주사선의 화소를 부호화하여 전송함으로써, 그 부호화과정이 매우 단순하고 압축 효율이 뛰어나다.
Description
본 발명은 영상 또는 형상 부호화방법 및 장치에 관한 것으로서, 특히 MPEG-4(Moving Picture Experts Group-phase 4)에서 제안되는 다기능 이진화상에서 격주사선 즉, 현재 주사선의 직전 및 직후 주사선 화소를 이용하여 그 사이에 위치한 화소에 대한 정보를 배타적 논리합(EX-OR)을 이용하여 보내는 영상 또는 형상 부호화방법 및 장치에 관한 것이다.
도 1은 기존의 형상(shape) 부호화기의 구조를 나타낸 블록도이다. 도 1에 있어서, 입력되는 원영상의 형상이 형상 부호화기(11)를 거쳐 부호화된 비트스트림(13)으로 표시되며, 형상 복호화기(13)에서는 부호화된 비트스트림(13)을 해석하여 복원된 형상을 제공한다.
상기 기존의 영상 혹은 형상(shape) 부호화기에서는, 해상도 혹은 화질 조절 등을 위하여 필요한 정보가 실제 이러한 조절이 없이 부호화하는 경우들에 비하여 부호화된 비트량이 크게 증가할 뿐 아니라 그에 따른 시스템의 복잡도 역시 증가하는 단점이 있었다. 특히, 이러한 문제는 형상 부호화시에는 큰 부담으로 작용하며, 해상도 혹은 화질 조절기능, 전송오차에 강한 부호화, 그리고 전송률 제어 등의 부가적인 다기능들이 요구되는 무선통신과 같은 통신환경의 경우에는 그 비중이 더욱 증대된다.
따라서 본 발명의 목적은 다기능 이진화상에서 격주사선 화소를 이용하여 그 사이에 위치한 화소에 대한 정보를 배타적 논리합을 이용하여 보내는 영상 또는 형상 부호화방법 및 장치를 제공하는데 있다.
상기 목적을 달성하기 위하여 본 발명에 의한 영상 또는 형상 부호화방법은 영상 혹은 상기 영상의 형상을 부호화함에 있어서, a) 상기 영상 혹은 형상의 소정 프레임에서 현재 주사선의 해당 행의 화소의 직전 및 직후 주사선의 해당 행의 화소에 대한 배타 논리합을 이용하여 상기 현재 주사선에 대한 분석을 수행하여, 상기 현재 주사선의 직전, 직후 주사선 정보, 상기 배타적 논리합 연산으로 선택된 화소값 및 상기 배타적 논리합 연산에서 빠진 화소값을 발생하는 단계; b) 다 차의 격주사선 처리를 위하여, 상기 현재 주사선의 직전, 직후 주사선 정보를 입력하여 상기 직전 및 직후 주사선에 대하여 상기 a) 단계를 수행하는 단계; 및 c) 상기 a) 단계를 상기 다 차의 최종 차수만큼 수행한 후 발생되는 상기 현재 주사선의 직전, 직후 주사선 정보를 부호화하여 비트스트림으로 형성하고, 각 차수에 발생된 상기 배타적 논리합 연산으로 선택된 화소값 및 상기 배타적 논리합 연산에서 빠진 화소값은 바로 상기 비트스트림에 합류하는 단계를 구비하는 것을 특징으로 한다.
상기 목적을 달성하기 위하여 본 발명에 의한 영상 또는 형상 부호화장치는 입력되는 원화상의 형상을 이루는 소정 프레임의 에서 현재 주사선의 해당 행의 화소의 직전 및 직후 주사선의 해당 행의 화소에 대한 배타 논리합을 이용하여 상기 현재 주사선에 대한 분석을 수행하여, 상기 현재 주사선의 직전, 직후 주사선 정보, 상기 배타적 논리합 연산으로 선택된 화소값 및 상기 배타적 논리합 연산에서 빠진 화소값을 형성하고, 해당 차수만큼 상기 현재 주사선의 직전, 직후 주사선에 대한 주사선 분석을 반복 수행하는 주사선 분석기; 상기 해당 차수만큼 수행한 후 최종적으로 발생되는 상기 현재 주사선의 직전, 직후 주사선 정보를 부호화하여 비트스트림으로 형성하고, 각 차수에 발생된 상기 배타적 논리합 연산으로 선택된 화소값 및 상기 배타적 논리합 연산에서 빠진 화소값은 바로 상기 비트스트림에 합류하는 부호화기; 상기 부호화기에서 출력되는 비트스트림을 복호화하는 복호화기; 및 상기 복호화된 비트스트림에 대하여, 가장 높은 차수의 직전, 직후 주사선 정보, 배타적 논리합 연산으로 선택된 화소값 및 배타적 논리합 연산에서 빠진 화소값을 이용하여 그 전 차수의 직전, 직후 주사선정보를 복원하고, 상기 이전 차수의 배타적 논리합 연산으로 선택된 화소값 및 배타적 논리합 연산에서 빠진 화소값을 이용하여 다 그 이전 차수의 직전, 직후 주사선 정보를 복원하는 것을 반복 수행하는 주사선 합성기를 구비하는 것을 특징으로 한다.
도 1은 일반적인 형상 부호화기의 구조도.
도 2는 본 발명에 의한 격주사선 분석/합성기를 포함한 형상 부호화기의 구조도.
도 3은 본 발명에서 적용된 격주사선 처리의 예.
도 4는 본 발명에 의한 1차 격주사선 분석기의 동작을 설명하기 위한 순서도.
도 5는 본 발명에 의한 다차 격주사선 분석기의 구조도.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 일실시예에 대하여 설명하기로 한다.
도 2은 본 발명에 의한 격주사선 분석/합성기를 포함한 형상부호화기의 구조도로서, 주사선 분석기(21), 형상 부호화기(23), 형상 복호화기(27)와 주사선 합성기(29)로 구성된다. 즉, 도 1에 도시된 형상 부호화기에 주사선 분석기(21) 및 합성기(29)를 삽입하여 부호화가 되기 전과 복호화가 끝난 후, 격주사선에 대한 처리를 하는 것이다. 주사선 분석기(21) 및 합성기(29)의 동작을 도 3을 참조하여 설명하면 다음과 같다.
도 3을 참조하면, 현재 주사선(t)의 이진 수치 정보는 그 전 주사선(t-1)과 그 후 주사선(t+1)을 배타 논리합 연산을 실행하여 파악될 수 있다. 즉, 직전 표본과 직후 표본의 값이 같은 경우(예를 들어, 흑과 흑 또는 백과 백)에는 배타적 논리합 연산 결과가 '0'이 된다. 대개의 경우, 현재의 표본값이 직전, 직후의 표본값이 같기 때문에 이러한 경우는 아무 정보도 부호화할 필요가 없다. 한편, 그렇지 않은 경우, 즉 직전 및 직후의 표본값과 상이한 경우에만 현재 주사선의 표본값을 보낸다. 또한, 극히 드문 경우이기는 하나, 직전, 직후의 표본값들이 현재의 표본값과 다른 경우가 존재하는데, 이러한 정보 역시 부호화 대상이 된다. 이러한 경우 부호화될 경우는 격주사선 정보, 배타적 논리합 연산으로 선택된 화소값, 그리고 배타적 논리합 연산에서 빠진 값들이다.
도 4는 1 차(level) 격주사선 분석기의 동작을 설명하는 순서도이다. 도 4에 도시된 바와 같이, 입력된 형상 데이터는 제101단계에 의해 초기화된다(즉, t=1). 제102단계에서는 현재의 주사선이 한 프레임에 대하여 마지막 주사선인지를 판단한다. 그 결과, 마지막 주사선일 경우에는 (t+1)번째의 주사선을 (t-1)번째의 주사선과 동일하게 설정하여(제103단계), 제104단계에서는 직전 주사선들로 배타적 논리합 연산이 이루어진다. 이 경우, 현재 주사선의 내용이 직전 주사선과 다른 경우의 화소값들은 부호화시 추가적인 정보(즉, 배타적 논리합에서 빠진 값)로 보내진다. 제104단계에서의 배타적 논리합 연산 결과, 격주사선 정보(105), 배타적 논리합 연산으로 선택된 화소값(106), 그리고 배타적 논리합 연산에서 빠진 값(107)이 발생한다. 한편, 제102단계에서 현재의 주사선이 마지막이 아닌 경우에는 제104단계로 바로 이행한다.
제108단계에서는 현재의 주사선이 마지막 주사선인가를 다시 판단하여, 마지막 주사선인 경우는 본 순서도를 종료하고, 그렇지 않은 경우에는 t를 2만큼 중가시켜(제109단계) 제102단계로 복귀한다.
도 5는 도 4의 1 차 격주사선 분석기를 격주사선 정보를 다시 입력으로 되돌려 다 차(multi-level)의 기능이 가능하도록 구성된 격주사선 분석기를 보여준 것이다.
도 5를 참조하면, 원 형상 데이터(204)는 스위치(203)를 통해 1차 주사선 분삭기(202)로 입력되어 도 4에서와 같은 주사선 분석이 이루어지고, 그 결과 격주사선 정보(105), 배타적 논리합 연산으로 선택된 화소값(106), 그리고 배타적 논리합 연산에서 빠진 값(107)이 발생한다. 한편, 필요에 따라 격주사선 정보(105)가 스위치(203)를 거쳐 다시 1차 주사선 분석기(202)로 귀환하여 입력될 수 있고, 이 경우는 다 차의 격주사선 처리가 가능하다. 마지막으로 발생되는 격주사선 정보(105)는 도 2의 형상 부호화기(23)에 입력되고, 각 차에서 발생된 배타적 논리합 연산으로 선택된 화소값(106), 그리고 배타적 논리합 연산에서 빠진 값(107)은 바로 비트스트림으로 합류하게 된다.
한편, 격주사선 합성기(도 2의 29)에서의 주사선 합성과정은 도 4의 격주사선 분석과정의 역순으로 진행되며, 가장 높은 차의 격주사선 정보(105), 배타적 논리합 연산으로 선택된 화소값(106), 그리고 배타적 논리합 연산에서 빠진 값(107)을 이용하여 그 전 차의 격주사선 정보(105)를 복원하고, 다시 그 차의 배타적 논리합 연산으로 선택된 화소값(106), 그리고 배타적 논리합 연산에서 빠진 값(107)을 이용하여 그 전 차의 격주사선 정보(105)를 복원한다. 이와 같은 과정이 원영상이 재현될 때까지 반복되어 진행된다.
다음 표 1은 본 발명에 의한 격주사선 처리방식을 사용한 경우와, 그렇지 않은 경우의 예를 나타낸 것이다. 표 1에서와 같이 격주사선 처리방식을 부가하더라도 비트량은 크게 증가하지 않으며, 격주사선 처리방식의 경우 부가정보에 대해 엔트로피 부호화를 사용하고 있지 않으므로 엔트로피 부호화를 사용하는 베이스라인(baseline) 부호화 자체의 결과와의 차이가 크지 않다. 또한, 격주사선 처리방식의 경우 압축효율 이외 다기능을 제공하는 반면, 베이스라인 부호화에는 다기능이 내재되어 있지 않다.
| 입력영상 | 격주사선방식+베이스라인부호화 | 단지 베이스라인 부호화 |
| Kids | 2087 bits/frame | 2016 bits/frame |
따라서, 본 발명은 형상 데이터의 경우 주사선간의 상관관계가 높기 때문에, 직전, 직후의 주사선 화소들에 대하여 배타적 논리합 연산을 행함으로써, 현재 주사선 화소들의 부호화량을 효과적으로 줄일 수 있도록 한다. 즉, 도 3에서와 같이 현재 주사선 화소 9개의 정보를 9비트로 보내지 않고, 단지 배타적 논리합 연산을 이용하여 부가정보 2비트 만으로도 표현할 수 있다.
상술한 바와 같이, 본 발명에 의하면 영상 혹은 형상 부호화기에 있어서, 현재의 주사선에 대한 직전, 직후 주사선의 화소들에 대하여 배타논리합 연산을 수행하여, 직전, 직후 주사선의 화소값이 서로 다른 경우에만 현재 주사선의 화소를 부호화하여 전송함으로써, 그 부호화과정이 매우 단순하고 압축 효율이 뛰어난 이점이 있다. 또한, 그 부호화과정이 독립적이기 때문에 어떠한 형상 부호화기와의 결합되어 사용할 수 있으며, 다 차를 이용하여 다중 해상도의 구현이 매우 적은 복잡도로 가능하다. 또한, 주 연산이 배타적 논리합 연산으로서 매우 단순하고 ㉰른 연산이 가능하여 가격, 성능, 그리고 속도면에서 매우 유리하며, 화질 조정이 용이하다. 또한, 부가정보에 대한 엔트로피 부호화를 수행하지 않더라도 효과적인 압축이 가능하고, 따라서 전송오차가 큰 통신환경에서 우수한 구조이다.
Claims (6)
- 영상 혹은 상기 영상의 형상을 부호화함에 있어서,상기 영상 혹은 형상의 소정 프레임에서 현재 주사선의 각 화소들에 대한 부호화 여부를 상기 현재 주사선의 각 행에 해당하는 직전 주사선의 각 행의 화소와 직후 주사선의 각 행의 화소를 이용하여 결정하는 것을 특징으로 하는 형상 부호화방법.
- 제 1 항에 있어서, 상기 a) 단계에서는 상기 직전 주사선의 각 행의 화소와 직후 주사선의 각 행의 화소가 상이한 경우, 상기 현재 주사선의 해당 행의 화소를 부호화하는 것을 특징으로 하는 형상 부호화방법.
- 제 2 항에 있어서, 상기 b) 단계에서 부호화되는 정보는 상기 현재 주사선의 직전, 직후 주사선 정보, 상기 배타적 논리합 연산으로 선택된 화소값 및 상기 배타적 논리합 연산에서 빠진 화소값인 것을 특징으로 하는 형상 부호화방법.
- 제 2 항에 있어서, 상기 현재 주사선이 상기 프레임에서 마지막 주사선에 해당하는 경우, 상기 직후 주사선을 상기 직전 주사선으로 대체하여 배타 논리합 연산을 수행하는 것을 특징으로 하는 형상 부호화방법.
- 영상 혹은 상기 영상의 형상을 부호화함에 있어서,a) 상기 영상 혹은 형상의 소정 프레임에서 현재 주사선의 해당 행의 화소의 직전 및 직후 주사선의 해당 행의 화소에 대한 배타 논리합을 이용하여 상기 현재 주사선에 대한 분석을 수행하여, 상기 현재 주사선의 직전, 직후 주사선 정보, 상기 배타적 논리합 연산으로 선택된 화소값 및 상기 배타적 논리합 연산에서 빠진 화소값을 발생하는 단계;b) 다 차의 격주사선 처리를 위하여, 상기 현재 주사선의 직전, 직후 주사선 정보를 입력하여 상기 직전 및 직후 주사선에 대하여 상기 a) 단계를 수행하는 단계; 및c) 상기 a) 단계를 상기 다 차의 최종 차수만큼 수행한 후 발생되는 상기 현재 주사선의 직전, 직후 주사선 정보를 부호화하여 비트스트림으로 형성하고, 각 차수에 발생된 상기 배타적 논리합 연산으로 선택된 화소값 및 상기 배타적 논리합 연산에서 빠진 화소값은 바로 상기 비트스트림에 합류하는 단계를 구비하는 것을 특징으로 하는 형상 부호화방법.
- 입력되는 원화상의 형상을 이루는 소정 프레임의 에서 현재 주사선의 해당 행의 화소의 직전 및 직후 주사선의 해당 행의 화소에 대한 배타 논리합을 이용하여 상기 현재 주사선에 대한 분석을 수행하여, 상기 현재 주사선의 직전, 직후 주사선 정보, 상기 배타적 논리합 연산으로 선택된 화소값 및 상기 배타적 논리합 연산에서 빠진 화소값을 형성하고, 해당 차수만큼 상기 현재 주사선의 직전, 직후 주사선에 대한 주사선 분석을 반복 수행하는 주사선 분석기;상기 해당 차수만큼 수행한 후 최종적으로 발생되는 상기 현재 주사선의 직전, 직후 주사선 정보를 부호화하여 비트스트림으로 형성하고, 각 차수에 발생된 상기 배타적 논리합 연산으로 선택된 화소값 및 상기 배타적 논리합 연산에서 빠진 화소값은 바로 상기 비트스트림에 합류하는 부호화기;상기 부호화기에서 출력되는 비트스트림을 복호화하는 복호화기; 및상기 복호화된 비트스트림에 대하여, 가장 높은 차수의 직전, 직후 주사선 정보, 배타적 논리합 연산으로 선택된 화소값 및 배타적 논리합 연산에서 빠진 화소값을 이용하여 그 전 차수의 직전, 직후 주사선정보를 복원하고, 상기 이전 차수의 배타적 논리합 연산으로 선택된 화소값 및 배타적 논리합 연산에서 빠진 화소값을 이용하여 다 그 이전 차수의 직전, 직후 주사선 정보를 복원하는 것을 반복 수행하는 주사선 합성기를 구비하는 것을 특징으로 하는 형상 부호화장치.
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1019960052066A KR100413806B1 (ko) | 1996-11-01 | 1996-11-01 | 격주사선화소를이용한형상부호화방법및장치 |
| US08/961,949 US6198508B1 (en) | 1996-11-01 | 1997-10-31 | Method of encoding picture data and apparatus therefor |
| FR9713792A FR2755564B1 (fr) | 1996-11-01 | 1997-11-03 | Procede et dispositif de codage de donnees d'images |
| JP30217197A JP3773338B2 (ja) | 1996-11-01 | 1997-11-04 | 画像データ符号化方法及び装置 |
| JP2005311912A JP4154417B2 (ja) | 1996-11-01 | 2005-10-26 | 映像データ符号化装置及び映像データ復号化装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1019960052066A KR100413806B1 (ko) | 1996-11-01 | 1996-11-01 | 격주사선화소를이용한형상부호화방법및장치 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR19980034111A true KR19980034111A (ko) | 1998-08-05 |
| KR100413806B1 KR100413806B1 (ko) | 2004-03-26 |
Family
ID=37423024
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1019960052066A KR100413806B1 (ko) | 1996-11-01 | 1996-11-01 | 격주사선화소를이용한형상부호화방법및장치 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR100413806B1 (ko) |
-
1996
- 1996-11-01 KR KR1019960052066A patent/KR100413806B1/ko not_active IP Right Cessation
Also Published As
| Publication number | Publication date |
|---|---|
| KR100413806B1 (ko) | 2004-03-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Wang et al. | Bitplane-by-bitplane shift (BbBShift)-a suggestion for JPEG2000 region of interest image coding | |
| CN100518315C (zh) | 采用清晰度增强技术的空间可缩放的压缩方案的编解码器及方法 | |
| US7016547B1 (en) | Adaptive entropy encoding/decoding for screen capture content | |
| US7688895B2 (en) | Method and/or circuit for binary arithmetic decoding decisions before termination | |
| KR100209412B1 (ko) | 비디오 신호의 유호 색차 성분 부호화 방법 | |
| USRE41095E1 (en) | Video coder employing pixel transportation | |
| US5805226A (en) | Method and apparatus for encoding a video signal by using a block truncation coding method | |
| US6307976B1 (en) | Apparatus and method of adaptively coding/decoding interlaced shaped material | |
| Bossen et al. | A simple and efficient binary shape coding technique based on bitmap representation | |
| CN1183766C (zh) | 在编码信号中的简化标识插入 | |
| JPH08125868A (ja) | 画像処理装置及び方法 | |
| KR19980034111A (ko) | 격주사선 화소를 이용한 형상 부호화 방법 및 장치 | |
| JPH10271495A (ja) | 画像データ符号化方法及び装置 | |
| JP2925047B2 (ja) | データ圧縮装置及びデータ伸張装置 | |
| US6904093B1 (en) | Horizontal/vertical scanning frequency converting apparatus in MPEG decoding block | |
| WO1999043161A1 (en) | Determining visually noticeable differences between two images | |
| JP2794951B2 (ja) | Ｍｒ符号の復号化方法 | |
| KR100327482B1 (ko) | 화상데이터부호화방법 | |
| Wong | Image halftoning using multipath tree coding | |
| JPH01108861A (ja) | 画像符号化装置 | |
| JPH07162689A (ja) | 画像符号化装置 | |
| JPH07131794A (ja) | 画像データ符号化方法および装置 | |
| Kou et al. | JBIG Compression Standard | |
| JPS6374269A (ja) | 擬似中間調画像信号復号化装置 | |
| JPH05236460A (ja) | ビデオ信号の符号化回路 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20080918 Year of fee payment: 6 |
|
| LAPS | Lapse due to unpaid annual fee |