KR20060135612A - 사전계산된 샘플들의 모자이크에 의한 필름 그레인시뮬레이션 방법 - Google Patents

사전계산된 샘플들의 모자이크에 의한 필름 그레인시뮬레이션 방법 Download PDF

Info

Publication number
KR20060135612A
KR20060135612A KR1020067005688A KR20067005688A KR20060135612A KR 20060135612 A KR20060135612 A KR 20060135612A KR 1020067005688 A KR1020067005688 A KR 1020067005688A KR 20067005688 A KR20067005688 A KR 20067005688A KR 20060135612 A KR20060135612 A KR 20060135612A
Authority
KR
South Korea
Prior art keywords
film grain
block
blocks
image
input image
Prior art date
Application number
KR1020067005688A
Other languages
English (en)
Other versions
KR100993990B1 (ko
Inventor
크리스티나 고밀라
조안 라치
질 맥도날드 보이스
Original Assignee
톰슨 라이센싱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 filed Critical 톰슨 라이센싱
Publication of KR20060135612A publication Critical patent/KR20060135612A/ko
Application granted granted Critical
Publication of KR100993990B1 publication Critical patent/KR100993990B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/10Image enhancement or restoration using non-spatial domain filtering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H04N19/23Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding with coding of regions that are present throughout a whole video segment, e.g. sprites, background or mosaic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20021Dividing image into blocks, subimages or windows
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • G06T2207/20052Discrete cosine transform [DCT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20204Removing film grain; Adding simulated film grain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Decoration By Transfer Pictures (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Control Of Exposure In Printing And Copying (AREA)
  • Color Image Communication Systems (AREA)

Abstract

사전 확립된 블록들의 풀(408)로부터의 필름 그레인(408)의 사전확립된 블록들을 이용하여 출력 이미지(19)에서의 필름 그레인이 시뮬레이션된다. 풀로부터의 블록의 평균 강도를 유입하는 이미지에서의 M×N 픽셀들의 세트 중 연속하는 하나의 평균 강도에 정합시킴으로써 연속하는 필름 그레인 블록들이 선택된다. 일단 이미지로부터의 모든 연속하는 픽셀 블록들이 선택된 필름 그레인 블록들에 정합한 경우에는, 선택된 필름 그레인 블록들이 "모자이크"되며, 이는 유입 이미지에 맵핑되는 보다 큰 이미지로 합성된다.
필름 그레인, 블렌딩, 시뮬레이션

Description

사전계산된 샘플들의 모자이크에 의한 필름 그레인 시뮬레이션 방법{METHOD FOR SIMULATING FILM GRAIN BY MOSAICING PRE-COMPUTED SAMPLES}
관련 출원의 상호 참조
본 출원은 35 U.S.C. 119(e)에 의하여 2003년 9월 23일 출원된 미국 가특허출원 제60/505,146호의 우선권을 주장하며, 이는 본 명세서에서 참조로 인용된다.
본 발명은 이미지 내의 필름 그레인을 시뮬레이션하는 기술에 관한 것이다.
본 발명의 발명자들에 의해 발명되고 본원의 양수인에게 양도된 이전의 공개 공보에서는 압축 전에 먼저 이미지를 그레인 필터링함으로써 복호화된 비디오 스트림에서 필름 그레인을 시뮬레이션하는 방법을 제안하였다. 비디오 스트림은 압축을 행하고 이어서 압축 전에 스트림 내에 존재한 필름 그레인에 관한 정보를 포함하는 메시지와 함께 수신을 위하여 복호화기에 전송한다. 압축된 비디오 스트림과 그레인을 포함하는 메시지의 수신시에, 복호화기는 압축된 스트림을 복호화하며, 그 후에 그레인 정보 메시지의 컨텐츠에 근거하여 필름 그레인을 시뮬레이션함으로써 원래의 그레인이 나타난 이미지를 복원한다. 이러한 필름 그레인 메시지는 부호화된 비디오 스트림을 수반하는 SEI(Supplemental Enhancement Information) 메시지의 형태를 띨 수 있다.
이러한 방식의 필름 그레인 시뮬레이션은 필름 그레인 보존이 중요한 양질의 애플리케이션에 대하여 높은 비트 레이트 절감을 제공한다. 그러나, 이러한 필름 그레인 시뮬레이션 방법은 복호화기가 필름 그레인을 재생성하고 전송된 필름 그레인 정보 메시지에 의해서 특정되는 대로 복호화된 비디오 스트림과 블렌딩하여야 하기 때문에 복호화기의 복잡도를 증가시킨다.
따라서, 종래 기술의 단점을 극복하는 필름 그레인을 시뮬레이션하는 기술에 대한 요구가 존재한다.
간단하게 말하면, 본 발명은 입력 이미지 블록에서 필름 그레인을 시뮬레이션하는 방법을 제공한다. 이러한 방법은 먼저 입력 이미지 블록에 대한 적어도 하나의 이미지 파라미터의 평균값을 계산함으로써 시작한다. 그 후에, 이미지 파라미터가 입력 이미지 블록의 이미지 파라미터와 가장 정합하는 적어도 하나의 이전에 확립된 필름 그레인 블록들의 풀로부터 필름 그레인 블록이 선택된다. 그 후에, 선택된 블록은 입력 이미지 블록과 블렌딩된다.
입력 이미지와의 조합을 위하여 적어도 하나의 사전확립된 필름 그레인 블록들의 풀로부터 필름 그레인 블록을 선택하는 것은 종래 방법에 의해서 행해진 복호화기에서의 필름 그레인의 시뮬레이션과 관련된 복잡도를 감소시킨다. 더욱이, 적어도 하나의 사전확립된 필름 그레인 블록들의 풀로부터 필름 그레인 블록을 선택하는 것은, 그렇지 않을 경우에 독립적으로 생성된 필름 그레인 블록들 사이에 천이(transition)하는 때에 발생할 아티팩트(artifact)를 감소시킨다.
도 1은 독립적으로 생성된 필름 그레인 샘플들의 모자이크에 의한 필름 그레인 시뮬레이션을 위한 종래 기술의 방법의 단계들을 도시하는 도면.
도 2는 도 1의 방법에 있어서 필름 그레인 블록들을 생성하기 위한 종래 기술의 방법의 단계들을 도시하는 도면.
도 3은 필름 그레인을 포함하는 출력 이미지를 생성하는 종래 기술의 복호화기의 일부를 도시하는 도면.
도 4는 사전계산된 필름 그레인의 블록들을 모자이크함으로써 필름 그레인을 시뮬레이션하는 본 발명의 예시적인 실시예에 따른 방법의 단계들을 도시하는 도면.
도 5는 도 4의 방법에서 이용된 필름 그레인 블록들을 사전확립하는 본 발명의 예시적인 실시예에 따른 방법의 단계들을 도시하는 도면.
도 6은 입력 이미지 특성으로부터 획득된 필름 그레인 블록들을 모자이크함으로써 필름 그레인을 시뮬레이션하는 본 발명의 다른 예시적인 실시예들에 따른 방법의 단계들을 도시하는 도면.
본 발명에 따르면, 이미지에서의 필름 그레인의 시뮬레이션이 사전확립된 개별적인 필름 블록들을 모자이크함으로써 행해진다. 개별적인 필름 블록들의 "모자이크(mosaicing)"라는 용어는 크기가 보다 작은 개별적인 필름 그레인 블록들을 블렌딩함으로서 복합 이미지를 구성하는 것을 의미한다. 사전확립된 필름 그레인 샘 플들을 모자이크함에 의한 필름 그레인 시뮬레이션의 장점을 이해하기 위하여, 종래 기술의 필름 그레인 시뮬레이션 프로세스에 대한 설명이 도움이 될 것이다.
도 1은 블록 단위의 필름 그레인 시뮬레이션을 위한 종래 기술의 방법의 단계들을 도시한다. 도 1의 방법은 먼저 단계 10에서 시스템 변수들을 초기화함으로써 시작한다. 단계 12에서, M×N 픽셀들의 블록들의 세트 중 연속하는 하나가 입력 이미지(13)로부터 판독된다(여기서, M 및 N은 각각 0 보다 큰 정수이다). 단계 12에서의 블록들의 판독은 래스터 스캔 순서에 따라 발생한다. 단계 12에 앞서, 입력 이미지(13)는 전형적으로 필터링을 거쳐서 필름 그레인을 제거하거나, 적어도 감소시키고, 분해하여 중첩하지 않는 M×N 픽셀들의 블록들을 발생시킨다. 이미지의 초기 압축은 그 자체로 필름 그레인을 제거하거나 감소시키는 데에 기여한다. 몇몇 경우에, 이미지가 디지털 방식으로 캡쳐되었으며/캡쳐되거나, 컴퓨터에 의해서 생성되었기 때문에, 입력 이미지는 어떤 초기 필름 그레인도 가지지 않을 것이다. 이러한 환경하에서, 아무것도 존재하지 않는 데에 그레인을 추가하는 것은 이미지를 향상시킬 것이다.
단계 12에 이어서, 단계 14에서 방금 판독된 블록에 대한 이미지 강도의 수치적 평균이 계산된다. 다음으로, 단계 16에서 필름 그레인 파라미터 선택이 행해진다. 선택은 단계 14에서 계산된 평균 강도값에 따라 입력 이미지를 수반하는 필름 그레인 메시지(17)에 제공되는 필름 그레인 파라미터들의 세트로부터 이루어진다. 전형적으로, 필름 그레인 메시지(17)는 SEI(Supplemental Enhancement Information) 메시지의 형태를 띠며, 그러한 이유로, 필름 그레인 정보를 포함하는 메시지를 참조하는 경우에 "SEI 메시지"라는 용어가 이후에 사용될 것이다. 강도 레벨에 따라 필름 그레인 특성이 변할 수 있기 때문에, 단계 16에서 수행된 선택은 추출된 이미지 블록 상에서 측정된 평균 강도에 따라 상이한 필름 그레인 파라미터들을 생성할 수 있다.
단계 16에서 선택된 필름 그레인 파라미터들을 이용하여, 필름 그레인 이미지(19)를 생성하는 데에 이용하기 위한 필름 그레인 샘플들의 N×M 픽셀 블록이 단계 18에서 생성된다. 이러한 프로세스를 통해서 생성된 각각의 필름 그레인 블록들은 저장되고 합성되어 원래 입력 이미지의 크기에 맵핑되는 필름 그레인 이미지를 생성한다. 이러한 합성 프로세스는 이전에 논의된 모자이크를 구성한다. 단계 18에 이어서, 단계 20에서는 단계 12에서 선택된 블록이 입력 이미지(11)의 마지막 블록을 구성하는지 여부에 대한 검사가 행해진다. 추가적인 블록들이 남는 경우에, 프로그램 실행은 단계 12로 진행하여 이후의 단계를 수행한다. 그렇지 않은 경우에, 단계 22가 수행되고, 프로세스는 종료한다.
도 2는 N×M 필름 그레인 샘플들의 블록을 생성하는 도 1의 단계 18을 집합적으로 포함하는 개별적인 단계들을 도시한다. 도 2의 방법은 시스템 변수들의 초기화가 행해지는 단계 200의 실행시에 시작한다. 그 후에, 단계 202에서 SEI 메시지(17)로부터 획득된 하나 이상의 파라미터들을 이용하는 N×M 랜덤 값들의 블록의 생성이 행해진다. 단계 204에서 생성된 블록은 단계 204에서 DCT(Discrete Cosine Transformation)를 거쳐서 N×M 주파수 계수들에 대응하는 세트를 획득한다. DCT 이외의 다른 변환들이 이용될 수도 있다. 단계 204에서 계산된 계수들은 단계 206 에서 주파수 필터링을 거치며, 여기서 필터링 계수들은 SEI 메시지(17) 내에 포함된 하나 이상의 파라미터들에 따라 계산된다. 주파수 필터링은 시뮬레이션된 그레인의 크기를 제어한다. 주파수 필터링된 계수들은 단계 208에서 IDCT(Inverse Discrete Cosine Transform)를 거쳐서 필름 그레인 이미지(19)를 생성한다. 이러한 프로세스는 잡음 편차의 특정화와, 주파수 영역에서의 필터링 프로세스를 제어하는 높은 차단 주파수 및 낮은 차단 주파수를 요구한다. 비디오 부호화 애플리케이션에서, SEI 메시지(17)는 전형적으로 이러한 정보를 전달한다. 이어지는 단계 208에서 프로세스가 종료한다.
도 3은 원래 이미지를 이용한 필름 그레인 블렌딩을 수행하는 복호화기(300)의 일부의 개략적인 블록도를 도시한다. 복호화기(300) 내의 가산 블록(310)은 제1 입력에서 복호화된 입력 이미지(13)를 수신한다. 도 2의 필름 그레인 이미지(19)는 가산 블록(310)의 제2 입력에서의 수신 이전에 디블록킹 필터(314)에서 디블록킹을 거친다. 가산 블록(310)은 입력 이미지(13)와 필름 그레인 이미지를 가산하여 필름 그레인을 포함하는 출력 이미지(316)를 생성한다. 필름 그레인의 개별적인 블록들이 독립적으로 생성되었기 때문에, 블럭들 사이의 천이 시에 아티팩트가 인식될 수 있다. 따라서, 디블록킹 필터(314)는 필름 그레인 모자이크로부터 야기되는 시각적인 아티팩트들을 감소시키는 데에 중요하게 된다.
전술한 바와 같이, 필름 그레인 시뮬레이션을 위한 종래 기술의 방법은 입력 이미지의 픽셀들의 각각의 처리된 블록으로 블렌딩하기 위한 필름 그레인의 생성을 요구한다. 이와 달리, 본 발명에 따른 필름 그레인 시뮬레이션은 제한된 수의 필 름 그레인 블록들이 계산되는 풀 생성 처리에 의해서 필름 그레인 생성을 제한함으로써 보다 큰 효율을 달성한다. 이러한 접근 방식은 필름 그레인 시뮬레이션 프로세스의 계산 복잡도를 상당히 감소시킨다.
도 4는 필름 그레인 시뮬레이션을 위한 본 발명의 제1 실시예에 따른 방법의 단계들을 도시한다. 아래에서 보다 상세히 기술될 바와 같이, 도 5의 필름 그레인 시뮬레이션 방법은 개별적인 사전계산된 필름 그레인 블록들의 풀로부터 그러한 블록들을 선택함으로써 플라이 시에(on the fly) 필름 그레인 생성을 바람직하게 회피한다. 도 4의 방법은 먼저 단계 400에서 시스템 변수들을 초기화함으로써 시작한다. 다음으로, 단계 402에서 N×M 픽셀들의 연속하는 블록이 입력 이미지(13)로부터 판독된다. 단계 402에서의 블록들의 판독은 래스터 스캔 순서로 행해진다. 전술한 바와 같이, 입력 이미지(13)는 전형적으로 자신의 그레인이 모두 제거되거나 감소되도록 할 것이며, 중첩하지 않는 N×M 픽셀들의 블록들로 분해될 것이다(여기서 N 및 M은 각각 0 보다 큰 정수이다). 이미지의 초기 압축 자체는 필름 그레인을 제거하거나 감소시키는 데에 기여할 수 있다. 몇몇 경우에, 이지미가 디지털 방식으로 캡쳐되며/캡쳐되거나, 컴퓨터에 의해 생성되기 때문에 입력 이미지는 어떤 초기 필름 그레인도 가지지 않을 것이다. 이러한 환경하에서, 아무것도 존재하지 않는 데에 그레인을 추가하는 것은 이미지를 향상시킬 것이다.
단계 402에 이어서, 단계 402에서 방금 판독된 블록들에 대하여 전형적으로 평균 강도값인 이미지 파라미터의 평균값이 단계 404에서 계산된다. 다음으로, 단계 406에서 도 5를 참조하여 이후에 기술되는 바와 같은 방식으로 적어도 하나의 사전계산된 사전확립된 필름 그레인 블록들의 풀로부터 필름 그레인 블록이 선택된다. 필름 그레인 블록들의 단일 풀에 의존하는 것보다는, 평균 이미지 강도 또는 하나 이상의 다른 이미지 파라미터들에 따라 선택이 행해질 수 있는 다수의 풀들이 존재할 수 있을 것이다. 동일한 강도 레벨 및 컬러 성분에 대하여 하나 이상의 블록이 이용가능할 경우에는 선택 기준이 특정되어야 한다. 예컨대, 감소된 수의 블록들이 이용가능한 경우에는 패턴들의 생성을 회피하기 위하여 풀로부터의 블록들의 의사 랜덤 선택이 발생할 수 있다. 이용가능한 필름 그레인 블록들의 세트의 변환된 복사본들을 이용할 수도 있다.
단계 406에서의 블록 선택에 이어서, 단계 410에서 선택된 블록은 전형적으로 변환을 거쳐 필름 그레인 이미지와 블렌딩하는 필름 그레인 이미지 블록(19)을 생성한다. 단계 410 이후에, 단계 412에서 추가적인 이미지 블록들이 남는지 여부를 판정하기 위한 검사가 이루어진다. 추가적인 이미지 블록들이 남은 경우에는 프로그램 실행은 단계 402로 진행하여 이후 단계들이 수행된다. 그렇지 않은 경우에는 단계 414에서 프로그램 실행이 종료한다.
도 5는 도 4의 사전확립된 필름 그레인 블록들(408)을 생성하는 본 발명에 따른 방법의 단계들을 도시한다. 도 5의 방법은 단계 500에서 먼저 초기화를 수행하여 모든 시스템 변수들을 리셋함으로써 시작한다. 다음으로, 단계 502에서 SEI 메시지(17)로부터의 필름 그레인 파라미터들의 선택이 행해진다. 그 후에, 단계 504에서 필름 그레인 샘플들의 K 블록들의 세트가 SEI 메시지(17) 내의 파라미터들의 각각의 세트에 대하여 생성된다. 상이한 파라미터들의 세트들은 상이한 컬러 성분들 및 상이한 강도 레벨들을 특정할 것이다. K=1을 가지는 특정한 실시는 파라미터들의 세트마다 단지 하나의 필름 그레인 블록을 생성하면서 가장 낮은 계산 요구량을 발생시킨다. 그러나, 패턴들의 생성을 회피하기 위하여, 상이한 강도 레벨들에 대하여 많은 수의 블록들 또는 심지어 상이한 수의 블록들을 이용하는 것이 바람직하다.
단계 504에 이어서, 단계 506에서 추가적인 파라미터 세트들이 남았는지 여부를 판정하는 검사가 행해진다. 추가적인 세트들이 남은 경우에는 프로그램은 단계 502로 진행하여 이어지는 단계들을 실행한다. 그렇지 않은 경우에는 단계 508에서 프로그램 실행이 종료한다.
도 5를 참조하여 기술된 사전확립된 필름 그레인 블록들의 풀을 생성하는 프로세스는 도 3에 도시된 바와 같이 복호화기(10)에서 발생하는 필름 그레인 블렌딩으로부터 완전히 분리된 상태로 남는다. 필름 그레인 생성을 예측하는 계산상의 장점에도 불구하고, 도 4의 필름 그레인 시뮬레이션 방법은 입력 이미지가 풀 내에 저장된 모든 블록들을 이용할 것인지 여부를 인식하지 않은 채로 남는 불편함을 발생시킨다.
도 6은 입력 이미지들의 특성을 이용하는 본 발명에 따른 필름 그레인 시뮬레이션 방법의 다른 실시예를 도시한다. 이후의 설명으로부터 보다 잘 이해될 수 있는 바와 같이, 도 6의 필름 그레인 방법은 SEI 메시지(17) 내에 존재하는 모든 가능한 강도 레벨들에 대하여 우선순위를 가지는 필름 그레인 블록들의 풀을 생성하지 않는다. 대신에, 도 6의 방법은 필름 그레인 블록들의 제한된 풀을 생성하 며, 입력 이미지 특성에 따라 블록들의 풀을 갱신한다.
도 6의 방법은 먼저 단계 600에서 초기화를 수행하여 모든 시스템 변수들을 리셋함으로써 시작한다. 입력 이미지(13)로부터의 N×M 픽셀들의 블록의 선택이 행해지는 단계 602가 단계 600에 이어진다. 그 후에, 이전에 선택된 이미지 블록의 적어도 하나의 이미지 파라미터의 평균(예컨대, 이미지 강도의 평균)이 단계 604에서 계산된다. 단계 606에서, 평균 강도가 선택된 이미지 블록의 평균 강도에 가장 근접하게 정합하는 필름 그레인 블록의 이용성에 대한 검사가 발생한다. 이러한 블록이 존재하지 않는 경우에는 프로그램 실행은 단계 608로 진행하여 SEI 메시지(17)로부터 선택된 파라미터들의 세트가 선택된다. 그 후에, 단계 610에서 N×M 필름 그레인 블록이 선택된 파라미터들로부터 생성된다. 단계 610에서 생성된 블록은 이제 사전계산된 필름 그레인 블록들(408)의 풀에 입력된다. 단계 612가 단계 610에 이어진다. 단계 612가 단계 610에 이어진다. 단계 612는, 풀 내의 필름 그레인 블록이 선택된 이미지 블록의 평균 강도와 가장 근접하게 정합하는 평균 강도를 가지는 것으로 판정되는 때에는 단계 606에도 이어진다. 단계 612에서, 가장 근접하게 정합하는 필름 그레인 블록의 선택은 필름 그레인 블록들의 풀(408)로부터 행해진다. 다음으로, 단계 614에서 이전에 선택된 블록들과 모자이크하여 필름 그레인 이미지(19)를 생성하기 위하여, 선택된 블록은 전형적으로 변환을 거친다. 이러한 방식으로, 변환 블록은 필름 그레인 이미지와 블렌딩된다. 단계 616에서, 단계 602에서 선택된 블록이 최후 블록을 구성하는지 여부에 대한 판정이 행해진다. 그렇지 않은 경우에, 프로그램 실행은 단계 602로 진행한다. 그 반대의 경우에는 프로그램 실행은 단계 618에서 종료한다.
전술한 방법은 풀(408)이 비어있는 경우뿐만 아니라 기존 블록들이 최근에 블렌딩을 위하여 이용된 경우에도 블록들이 이용가능하지않은지 여부를 추정할 수 있다. 풀 생성을 관리하고 프로세스를 갱신하는 다른 기준 또한 고려될 수 있다. 도 6의 방법은 입력 이미지들의 특성에 따라 사전확립된 필름 그레인 블록들의 풀(408)을 점진적으로 생성하며/생성하거나 갱신할 수 있다. 예컨대, 풀(408)은 많은 수의 블록들을 가장 유력한 강도 레벨 내에 배열하도록 구성되어 가시적인 패턴들의 생성을 회피할 수 있다. 이러한 전략에 따라, 풀(408) 내의 필름 그레인 블록들의 분포는 암화(darkening) 또는 명화(lightening)와 관련된 이미지 특성의 변화에 점진적으로 정합할 것이다.
이상, 이미지에서의 필름 그레인을 시뮬레이션하는 기술에 관하여 설명하였다.

Claims (14)

  1. 입력 이미지 블록에서 필름 그레인(film grain)을 시뮬레이션하는 방법으로서,
    (a) 상기 블록에 대한 적어도 하나의 이미지 파라미터의 평균값을 계산하는 단계와,
    (b) 적어도 하나의 이전에 확립된 필름 그레인 블록들의 풀로부터 이미지 파라미터가 상기 입력 이미지 블록의 이미지 파라미터와 가장 근접하게 정합하는 필름 그레인 블록을 선택하는 단계와,
    (c) 상기 선택된 필름 그레인 블록을 상기 입력 이미지 블록과 블렌딩하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서,
    상기 입력 이미지 블록과 블렌딩하는 단계 전에 상기 선택된 필름 그레인 블록을 디블록킹(de-blocking)하는 단계를 더 포함하는 방법.
  3. 제1항에 있어서,
    상기 이전에 확립된 필름 그레인 블록들은 이미지 강도에 근거하여 상기 적어도 하나의 풀로 구성되는 방법.
  4. 제1항에 있어서,
    상기 입력 이미지의 특성에 따라 상기 적어도 하나의 풀을 갱신하는 단계를 더 포함하는 방법.
  5. 제3항에 있어서,
    적어도 하나의 상이한 컬러 성분에 대하여 상이한 필름 그레인 블록이 선택되는 방법.
  6. 제1항에 있어서,
    상기 블렌딩 단계 전에 상기 선택된 블록을 변환하는 단계를 더 포함하는 방법.
  7. 제1항에 있어서,
    다수의 필름 그레인 블록들의 풀들 중에서 필름 그레인 블록을 선택하는 단계를 더 포함하는 방법.
  8. 입력 이미지에서의 필름 그레인을 시뮬레이션하는 방법- 상기 입력 이미지는 필름 그레인이 적어도 감소되고, 입력 이미지 블록들로 분해됨 -으로서,
    (a) 입력 이미지 블록들의 세트 중에서 연속하는 블록을 선택하는 단계와,
    (b) 상기 연속하는 블록에 대한 적어도 하나의 이미지 파라미터의 평균값을 계산하는 단계와,
    (c) 적어도 하나의 이전에 확립된 필름 그레인 블록들의 풀 중에서 상기 연속하는 블록의 상기 적어도 하나의 이미지 파라미터의 평균값에 가장 근접하게 정합하는 이미지 파라미터를 가지는 필름 그레인 블록을 선택하는 단계와,
    (d) 상기 이미지 내의 모든 픽셀 블록들에 대하여 상기 (a) 내지 (c) 단계를 반복하는 단계와,
    (e) 상기 선택된 필름 그레인 블록들을 블렌딩하여 필름 그레인을 가지는 출력 이미지를 생성하는 단계
    를 포함하는 방법.
  9. 제8항에 있어서,
    상기 이전에 확립된 필름 그레인 블록들은 이미지 강도에 근거하여 상기 적어도 하나의 풀로 구성되는 방법.
  10. 제8항에 있어서,
    상기 입력 이미지의 특성에 따라 상기 사전확립된 필름 그레인 블록들의 상기 적어도 하나의 풀을 갱신하는 단계를 더 포함하는 방법.
  11. 제8항에 있어서,
    적어도 하나의 상이한 컬러 성분에 대하여 상이한 필름 그레인 블록이 선택되는 방법.
  12. 제7항에 있어서,
    상기 (c) 내지 (d) 단계를 반복하기 전에 상기 선택된 블록을 변환하는 단계를 더 포함하는 방법.
  13. 제8항에 있어서,
    다수의 필름 그레인 블록들의 풀 중에서 필름 그레인 블록을 선택하는 단계를 더 포함하는 방법.
  14. 제8항에 있어서,
    상기 (c) 내지 (d) 단계를 반복하기 전에 상기 연속하는 필름 그레인 블록을 디블록킹하는 단계를 더 포함하는 방법.
KR1020067005688A 2003-09-23 2004-09-10 사전계산된 샘플들의 모자이크에 의한 필름 그레인시뮬레이션 방법 KR100993990B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US50514603P 2003-09-23 2003-09-23
US60/505,146 2003-09-23

Publications (2)

Publication Number Publication Date
KR20060135612A true KR20060135612A (ko) 2006-12-29
KR100993990B1 KR100993990B1 (ko) 2010-11-11

Family

ID=34421522

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020067005688A KR100993990B1 (ko) 2003-09-23 2004-09-10 사전계산된 샘플들의 모자이크에 의한 필름 그레인시뮬레이션 방법

Country Status (12)

Country Link
US (1) US7945106B2 (ko)
EP (1) EP1676445B1 (ko)
JP (1) JP5100121B2 (ko)
KR (1) KR100993990B1 (ko)
CN (1) CN1857006B (ko)
AU (1) AU2004306386B2 (ko)
BR (1) BRPI0414641B1 (ko)
CA (1) CA2538785C (ko)
HK (1) HK1093643A1 (ko)
RU (1) RU2340943C2 (ko)
WO (1) WO2005034518A1 (ko)
ZA (1) ZA200602350B (ko)

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005100100A (ja) * 2003-09-25 2005-04-14 Toyota Motor Corp 車輪情報処理装置および車輪情報処理方法
RU2340944C2 (ru) * 2003-10-14 2008-12-10 Томсон Лайсенсинг Способ имитации зерна пленки на битовом уровне
US8150206B2 (en) * 2004-03-30 2012-04-03 Thomson Licensing Method and apparatus for representing image granularity by one or more parameters
JP4696121B2 (ja) 2004-10-18 2011-06-08 トムソン ライセンシング フィルム粒子のシミュレーション方法
EP1803303B1 (en) * 2004-10-21 2019-12-04 InterDigital VC Holdings, Inc. Technique for adaptive de-blocking of block-based film grain patterns
EP1813118B1 (en) 2004-11-12 2019-12-04 InterDigital VC Holdings, Inc. Film grain simulation for normal play and trick mode play for video playback systems
EP1812904B1 (en) 2004-11-16 2012-04-11 Thomson Licensing Film grain simulation method based on pre-computed transform coefficients
JP4950059B2 (ja) 2004-11-16 2012-06-13 トムソン ライセンシング 映像システムにおけるビットアキュレートシミュレーションのためのフィルムグレインseiメッセージ挿入
EP1812905B1 (en) * 2004-11-17 2019-07-03 InterDigital VC Holdings, Inc. Bit-accurate film grain simulation method based on pre-computed transformed coefficients
KR101208158B1 (ko) 2004-11-22 2012-12-05 톰슨 라이센싱 필름 그레인 시뮬레이션을 위한 필름 그레인 캐시 분할방법, 장치 및 시스템
JP4829893B2 (ja) 2004-11-23 2011-12-07 トムソン ライセンシング 低計算量のフィルム粒子シミュレーション技術
CA2587445C (en) * 2004-11-24 2013-06-18 Thomson Licensing Film grain simulation technique for use in media playback devices
US8213500B2 (en) 2006-12-21 2012-07-03 Sharp Laboratories Of America, Inc. Methods and systems for processing film grain noise
US7742652B2 (en) 2006-12-21 2010-06-22 Sharp Laboratories Of America, Inc. Methods and systems for image noise processing
JP2008219163A (ja) * 2007-02-28 2008-09-18 Toshiba Corp 情報符号化方法、情報再生方法、及び情報記憶媒体
US10715834B2 (en) 2007-05-10 2020-07-14 Interdigital Vc Holdings, Inc. Film grain simulation based on pre-computed transform coefficients
JP5751679B2 (ja) * 2010-01-15 2015-07-22 マーベル ワールド トレード リミテッド 圧縮アーチファクトをマスクするためのフィルムグレインの利用
CN102884799B (zh) * 2010-05-11 2015-11-25 汤姆森许可贸易公司 用于3维视频的舒适噪声和胶片颗粒处理
CN105376548B (zh) * 2010-05-11 2017-07-07 汤姆森许可贸易公司 用于3维视频的舒适噪声和胶片颗粒处理
JP5693089B2 (ja) * 2010-08-20 2015-04-01 キヤノン株式会社 画像処理装置、及び画像処理装置の制御方法
US9614724B2 (en) 2014-04-21 2017-04-04 Microsoft Technology Licensing, Llc Session-based device configuration
US9639742B2 (en) 2014-04-28 2017-05-02 Microsoft Technology Licensing, Llc Creation of representative content based on facial analysis
US9773156B2 (en) 2014-04-29 2017-09-26 Microsoft Technology Licensing, Llc Grouping and ranking images based on facial recognition data
US9430667B2 (en) 2014-05-12 2016-08-30 Microsoft Technology Licensing, Llc Managed wireless distribution network
US10111099B2 (en) 2014-05-12 2018-10-23 Microsoft Technology Licensing, Llc Distributing content in managed wireless distribution networks
US9384334B2 (en) 2014-05-12 2016-07-05 Microsoft Technology Licensing, Llc Content discovery in managed wireless distribution networks
US9384335B2 (en) 2014-05-12 2016-07-05 Microsoft Technology Licensing, Llc Content delivery prioritization in managed wireless distribution networks
US9874914B2 (en) 2014-05-19 2018-01-23 Microsoft Technology Licensing, Llc Power management contracts for accessory devices
US10037202B2 (en) 2014-06-03 2018-07-31 Microsoft Technology Licensing, Llc Techniques to isolating a portion of an online computing service
US9367490B2 (en) 2014-06-13 2016-06-14 Microsoft Technology Licensing, Llc Reversible connector for accessory devices
US9460493B2 (en) 2014-06-14 2016-10-04 Microsoft Technology Licensing, Llc Automatic video quality enhancement with temporal smoothing and user override
US9373179B2 (en) 2014-06-23 2016-06-21 Microsoft Technology Licensing, Llc Saliency-preserving distinctive low-footprint photograph aging effect
US20230050950A1 (en) * 2019-12-19 2023-02-16 Dolby Laboratories Licensing Corporation Noise synthesis for digital images

Family Cites Families (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01156069A (ja) * 1987-12-14 1989-06-19 Canon Inc 画像処理装置
US4935816A (en) 1989-06-23 1990-06-19 Robert A. Faber Method and apparatus for video image film simulation
JPH0497681A (ja) 1990-08-16 1992-03-30 Nippon Telegr & Teleph Corp <Ntt> 映像符号化復号化装置
US5457491A (en) 1990-10-11 1995-10-10 Mowry; Craig P. System for producing image on first medium, such as video, simulating the appearance of image on second medium, such as motion picture or other photographic film
US5140414A (en) 1990-10-11 1992-08-18 Mowry Craig P Video system for producing video images simulating images derived from motion picture film
US5374954A (en) 1990-10-11 1994-12-20 Harry E. Mowry Video system for producing video image simulating the appearance of motion picture or other photographic film
US5687011A (en) 1990-10-11 1997-11-11 Mowry; Craig P. System for originating film and video images simultaneously, for use in modification of video originated images toward simulating images originated on film
JP3062703B2 (ja) * 1991-05-27 2000-07-12 コニカ株式会社 画像ノイズシミュレーション方法
US5335013A (en) 1992-01-16 1994-08-02 Faber Robert A Method and apparatus for video camera image film simulation
US5283164A (en) 1992-06-19 1994-02-01 Eastman Kodak Company Color film with closely matched acutance between different color records
US5471572A (en) 1993-07-09 1995-11-28 Silicon Graphics, Inc. System and method for adding detail to texture imagery in computer generated interactive graphics
US5475425B1 (en) 1994-01-25 2000-07-25 Przyborski Production Apparatus and method for creating video ouputs that emulate the look of motion picture film
US5831673A (en) 1994-01-25 1998-11-03 Przyborski; Glenn B. Method and apparatus for storing and displaying images provided by a video signal that emulates the look of motion picture film
JP3980659B2 (ja) * 1994-08-31 2007-09-26 ソニー株式会社 動画像符号化方法及び装置、動画像復号化方法及び装置。
WO1996013006A1 (en) 1994-10-20 1996-05-02 Mark Alan Zimmer Digital mark-making method
PL175571B1 (pl) 1994-12-06 1999-01-29 Cfb Gmbh Sposób i urządzenie do przetwarzania standardów obrazowych
JPH08163594A (ja) * 1994-12-12 1996-06-21 Sony Corp 動画像復号化方法及び動画像復号化装置
US5629769A (en) * 1995-06-01 1997-05-13 Eastman Kodak Company Apparatus and method for the measurement of grain in images
JPH0962718A (ja) * 1995-08-23 1997-03-07 Sony Corp シミュレーション装置およびシミュレーション方法
US5641596A (en) 1995-12-05 1997-06-24 Eastman Kodak Company Adjusting film grain properties in digital images
AU713795B2 (en) * 1996-03-28 1999-12-09 Koninklijke Philips Electronics N.V. Method and arrangement for encoding and decoding images
GB2312124B (en) 1996-04-12 1998-05-13 Discreet Logic Inc Processing image data
US5669382A (en) * 1996-11-19 1997-09-23 General Electric Company System for measuring myocardium in cardiac images
US6317216B1 (en) 1999-12-13 2001-11-13 Brown University Research Foundation Optical method for the determination of grain orientation in films
AU2001251386A1 (en) 2000-04-07 2001-10-23 Demografx Enhanced temporal and resolution layering in advanced television
CA2309002A1 (en) 2000-05-23 2001-11-23 Jonathan Martin Shekter Digital film grain reduction
JP2001357095A (ja) * 2000-06-12 2001-12-26 Fujitsu Ltd 半導体装置設計支援装置
JP2001357090A (ja) 2000-06-13 2001-12-26 Hitachi Ltd 論理合成方法及び論理合成装置
US6940993B2 (en) 2000-12-13 2005-09-06 Eastman Kodak Company System and method for embedding a watermark signal that contains message data in a digital image
US6987586B2 (en) * 2001-03-02 2006-01-17 Eastman Kodak Company Method of digital processing for digital cinema projection of tone scale and color
ATE363183T1 (de) 2001-08-24 2007-06-15 Koninkl Philips Electronics Nv Addieren von halbbildern eines bildes
US20030206662A1 (en) * 2002-05-03 2003-11-06 Avinash Gopal B. Method and apparatus for improving perceived digital image quality
US7065255B2 (en) 2002-05-06 2006-06-20 Eastman Kodak Company Method and apparatus for enhancing digital images utilizing non-image data
US7147749B2 (en) 2002-09-30 2006-12-12 Tokyo Electron Limited Method and apparatus for an improved upper electrode plate with deposition shield in a plasma processing system
WO2004095829A1 (en) * 2003-04-10 2004-11-04 Thomson Licensing S.A. Technique for simulating film grain on encoded video
SI3457359T1 (sl) 2003-05-15 2020-04-30 Dolby International Ab Postopek in naprava za predstavitev zrnatosti slike z enim ali več parametri
JP2005080301A (ja) * 2003-09-01 2005-03-24 Matsushita Electric Ind Co Ltd 動画像符号化方法および動画像復号化方法
BRPI0414397A (pt) * 2003-09-17 2006-11-21 Thomson Licensing geração de imagem de referência adaptativa
KR101114743B1 (ko) * 2003-09-23 2012-03-13 톰슨 라이센싱 주파수 필터링을 이용한 필름 그레인 시뮬레이팅을 위한기술
US20070047658A1 (en) * 2003-09-23 2007-03-01 Alexandros Tourapis Video comfort noise addition technique
RU2340944C2 (ru) * 2003-10-14 2008-12-10 Томсон Лайсенсинг Способ имитации зерна пленки на битовом уровне
US7680356B2 (en) * 2003-10-14 2010-03-16 Thomson Licensing Technique for bit-accurate comfort noise addition
RU2346330C2 (ru) * 2003-12-05 2009-02-10 Томсон Лайсенсинг Методика имитации зернистости пленки с помощью базы данных узоров зернистости пленки
US8150206B2 (en) * 2004-03-30 2012-04-03 Thomson Licensing Method and apparatus for representing image granularity by one or more parameters
US7593465B2 (en) * 2004-09-27 2009-09-22 Lsi Corporation Method for video coding artifacts concealment
JP4696121B2 (ja) * 2004-10-18 2011-06-08 トムソン ライセンシング フィルム粒子のシミュレーション方法
CN101044511A (zh) * 2004-10-18 2007-09-26 汤姆森特许公司 胶片颗粒模拟的方法、装置及系统
US7400784B2 (en) * 2004-10-19 2008-07-15 Institut National De L'audiovisuel-Ina Search of similar features representing objects in a large reference database
EP1812904B1 (en) 2004-11-16 2012-04-11 Thomson Licensing Film grain simulation method based on pre-computed transform coefficients
JP4829893B2 (ja) * 2004-11-23 2011-12-07 トムソン ライセンシング 低計算量のフィルム粒子シミュレーション技術
CA2587445C (en) * 2004-11-24 2013-06-18 Thomson Licensing Film grain simulation technique for use in media playback devices
US7432986B2 (en) * 2005-02-16 2008-10-07 Lsi Corporation Method and apparatus for masking of video artifacts and/or insertion of film grain in a video decoder
JP4097681B1 (ja) 2007-02-01 2008-06-11 日本航空電子工業株式会社 コネクタ
GB2459875A (en) * 2008-05-08 2009-11-11 Jones Richard W A method and apparatus for diverting flowing water from a cylindrical conduit

Also Published As

Publication number Publication date
RU2340943C2 (ru) 2008-12-10
RU2006113606A (ru) 2007-11-20
AU2004306386B2 (en) 2009-10-29
KR100993990B1 (ko) 2010-11-11
WO2005034518A1 (en) 2005-04-14
CN1857006A (zh) 2006-11-01
US7945106B2 (en) 2011-05-17
CA2538785A1 (en) 2005-04-14
AU2004306386A1 (en) 2005-04-14
BRPI0414641A (pt) 2006-11-21
JP5100121B2 (ja) 2012-12-19
BRPI0414641B1 (pt) 2019-01-08
EP1676445B1 (en) 2019-09-04
CA2538785C (en) 2013-10-29
JP2007521573A (ja) 2007-08-02
CN1857006B (zh) 2011-06-08
HK1093643A1 (en) 2007-03-02
ZA200602350B (en) 2007-09-26
EP1676445A1 (en) 2006-07-05
US20070058878A1 (en) 2007-03-15

Similar Documents

Publication Publication Date Title
KR100993990B1 (ko) 사전계산된 샘플들의 모자이크에 의한 필름 그레인시뮬레이션 방법
JP2007507169A (ja) ビデオ・コンフォートノイズ付加技術
US7013050B2 (en) Image encoding apparatus and method, program code, and storage medium
US7382923B2 (en) Method and device for processing and decoding a coded digital signal
EP2157796A1 (en) Statistic image improving method, image encoding method, and image decoding method
JP2002325170A (ja) 画像処理装置及びその方法並びにプログラムコード、記憶媒体
KR101055355B1 (ko) 비디오 스트림의 아티팩트 감소 방법과 복호화 장치
JP4066367B2 (ja) 画像ノイズ除去方法
JP2005167399A (ja) 画像ノイズ除去方法
EP1751982A1 (en) Method and device for encoding blocks of values
US20060222255A1 (en) Image enhancement device
JPH06237386A (ja) 画像処理装置
KR102098375B1 (ko) Jpeg 압축 이미지의 해상도 증가 시스템 및 그 방법
JP3730538B2 (ja) ディザ処理装置
JPH07240845A (ja) 画像のデータ圧縮および伸張
US8180169B2 (en) System and method for multi-scale sigma filtering using quadrature mirror filters
KR20070100279A (ko) 링크된 랜덤 생성기들을 갖는 전자 이미지 처리 방법 및장치
JP7358136B2 (ja) 画像符号化装置、画像符号化方法、及びプログラム、画像復号装置、画像復号方法、及びプログラム
JP4083043B2 (ja) 符号化ノイズ除去装置
CN112511822B (zh) 基于注意力模型和渐进式网络的图像编码失真滤波方法
MXPA06003283A (en) Method for simulating film grain by mosaicing pre-computed samples
JP2004072293A (ja) 画像データ処理装置およびその制御方法
JP2009188632A (ja) 画像処理装置、画像処理システム、画像処理方法および画像処理プログラム
JPH10145790A (ja) 画像形成装置および画像形成方法
JP2005286710A (ja) 画像処理装置および画像処理方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20131018

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20141023

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20151016

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20161019

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20171018

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20181031

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20191023

Year of fee payment: 10