KR100919979B1 - 촬영 영상 수정방법 및 장치 - Google Patents

촬영 영상 수정방법 및 장치 Download PDF

Info

Publication number
KR100919979B1
KR100919979B1 KR1020020063530A KR20020063530A KR100919979B1 KR 100919979 B1 KR100919979 B1 KR 100919979B1 KR 1020020063530 A KR1020020063530 A KR 1020020063530A KR 20020063530 A KR20020063530 A KR 20020063530A KR 100919979 B1 KR100919979 B1 KR 100919979B1
Authority
KR
South Korea
Prior art keywords
image
area
region
filter window
unit
Prior art date
Application number
KR1020020063530A
Other languages
English (en)
Other versions
KR20040034886A (ko
Inventor
홍세원
Original Assignee
삼성디지털이미징 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성디지털이미징 주식회사 filed Critical 삼성디지털이미징 주식회사
Priority to KR1020020063530A priority Critical patent/KR100919979B1/ko
Priority to US10/688,517 priority patent/US7496238B2/en
Publication of KR20040034886A publication Critical patent/KR20040034886A/ko
Application granted granted Critical
Publication of KR100919979B1 publication Critical patent/KR100919979B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
    • H04N1/622—Retouching, i.e. modification of isolated colours only or in isolated picture areas only with simulation on a subsidiary picture reproducer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/75—Circuitry for compensating brightness variation in the scene by influencing optical camera components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00—Still video cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Studio Devices (AREA)

Abstract

촬영 영상 수정방법 및 장치가 개시된다. 이 방법은 촬영된 영상에서 수정이 요구되는 영상 영역을 인식하는 단계 및 인식된 영상 영역을 블러링하여 수정하는 단계를 구비하는 것을 특징으로 한다. 그러므로, 본 발명은 휴대가 간편한 디지털 카메라 전용 프린터가 공급되고 있는 상황에서 컴퓨터를 이용하지 않고도 디지털 카메라 자체를 이용해 촬영한 영상을 간편하게 수정할 수 있도록 한다.

Description

촬영 영상 수정방법 및 장치{Method and apparatus retouching an photographed image}
도 1은 본 발명에 의한 촬영 영상 수정방법을 설명하기 위한 일 실시예의 플로우차트이다.
도 2는 도 1에 도시된 제12 단계에 대한 본 발명에 의한 또 다른 일 실시예를 설명하기 위한 플로우차트이다.
도 3은 도 1에 도시된 본 발명에 의한 촬영 영상 수정방법에서 인식된 영상 영역을 확대하는 단계를 더 구비하는 플로우차트이다.
도 4는 도 3에 도시된 제44 단계에 대한 본 발명에 의한 일 실시예를 설명하기 위한 플로우차트이다.
도 5는 도 3에 도시된 제44 단계에 대한 본 발명에 의한 또 다른 일 실시예를 설명하기 위한 플로우차트이다.
도 6은 본 발명에 의한 촬영 영상 수정장치를 설명하기 위한 일 실시예의 블록도이다.
도 7은 도 6에 도시된 영역 수정부의 본 발명에 따른 바람직한 또 다른 일 실시예의 블록도이다.
도 8은 본 발명에 의한 촬영 영상 수정장치에서 영역 확대부가 더 구비된 또 다른 일 실시예의 블록도이다.
도 9는 도 8에 도시된 영역 수정부의 본 발명에 따른 바람직한 일 실시예의 블록도이다.
도 10은 도 8에 도시된 영역 수정부(340)의 본 발명에 따른 바람직한 또 다른 일 실시예의 블록도이다.
도 11은 디지털 카메라의 후면에 마련된 본 발명과 관련된 기능키들의 예시를 나타내는 도면이다.
도 12는 본 발명에 의한 도 8 및 도10에서 도시된 촬영영상 수정 장치에서 잡티 등을 제거하는 과정을 설명하기 위해 디스플레이된 상태를 나타내는 예시적인 도면이다.
〈도면의 주요 부호에 대한 간단한 설명〉
100, 300: 영역 인식부 120, 340: 영역 수정부
200: 필터 창 형성부 210: 필터 창 이동부
220: 영역 복사부 230: 색 정보 치환부
240: 주변 영역 인식부 250: 주변 영역 블러링부
320: 영역 확대부 400: 세부 수정 영역 인식부
420: 세부 수정 영역 블러링부
본 발명은 디지털 카메라로 촬영한 영상 처리에 관한 것으로, 특히 디지털 카메라 자체에서 수행되는 촬영 영상 수정방법 및 장치에 관한 것이다.
근래에 광학 카메라를 대체해 디지털 카메라의 사용이 늘어나고 있다. 디지털 카메라는 눈에 보이는 장면을 디지털 저장 매체에 저장하는 방식으로 카메라와 스캐너의 역할을 대체할 수 있는 카메라이다. 광학 카메라는 영상을 아날로그량으로 기록하지만 디지털 카메라는 영상을 비트맵으로 분할하고, 각각의 휘도를 디지털 량으로 기록한다. 디지털 카메라는 퍼스널 컴퓨터의 화상 데이터와 호환성이 높아 편집 및 수정이 간편하고, 촬영한 영상을 내부기억장치(예를 들어, 하드디스크 또는 메모리 카드)로 저장할 수 있으며, 외부 컴퓨터와 연결하여 촬영한 영상을 전송할 수도 있다.
디지털 카메라로 촬영된 영상은 단순히 전체의 영상을 수정하기 위한 방법으로 세피아(sepia) 모드, 텅스텐(tungsten) 모드 또는 샤프닝(sharpening) 모드 등을 통해 이루어진다. 세피아 모드는 이미지 전체를 갈색 등의 단색으로 처리하는 영상 처리 모드이고, 텅스텐 모드는 이미지 전체의 색 밸런스를 붉게 강조하여 처리하는 영상 처리 모드이다. 또한, 샤프닝 모드는 저주파 차단 필터를 이용해 저주파를 차단시키고 고주파를 유지 및 강화시켜 영상을 뚜렷하게 나타내는 처리모드이다.
그런데, 종래의 디지털 카메라는 촬영한 영상 중에 잡음(여기서, 잡음이란, 일반적으로 알려진 시끄러운 소음이 아니라 영상에서 화소값이 불규칙한 것을 나타냄) 또는 영상 내에서 삭제하고 싶은 물체(예를 들어, 얼굴에 난 잡티 등)에 대해 수정하기 위해서는 반드시 컴퓨터로 영상 정보를 전송하여 포토 샵 등의 이미지 도구를 이용해야 하는 문제점이 있었다.
본 발명이 이루고자 하는 기술적 과제는, 디지털 카메라로 촬영한 영상에 대해 디지털 카메라 자체에서 직접 수정할 수 있도록 하는 촬영 영상 수정방법을 제공하는데 있다.
본 발명이 이루고자 하는 다른 기술적 과제는, 디지털 카메라로 촬영한 영상에 대해 디지털 카메라 자체에서를 직접 수정할 수 있도록 하는 촬영 영상 수정장치를 제공하는데 있다.
상기의 과제를 이루기 위해, 본 발명에 따른 촬영 영상 수정방법은 촬영된 영상에서 수정이 요구되는 영상 영역을 인식하는 단계 및 인식된 영상 영역을 블러링하여 수정하는 단계로 이루어짐이 바람직하다.
상기의 다른 과제를 이루기 위해, 본 발명에 따른 촬영 영상 수정장치는 촬영된 영상에서 수정이 요구되는 영상 영역을 인식하고, 인식된 영상 영역을 출력하는 영역 인식부 및 영역 인식부로부터 입력받은 인식된 영상 영역을 블러링하여 수정하고, 수정된 결과를 출력하는 영역 수정부로 구성됨이 바람직하다.
이하, 본 발명에 의한 촬영 영상 수정방법을 첨부된 도면을 참조하여 다음과 같이 설명한다.
도 1은 본 발명에 의한 촬영 영상 수정방법을 설명하기 위한 일 실시예의 플 로우차트로서, 수정이 요구되는 영상 영역을 인식하고 수정하는 단계(제10 및 제12 단계들)로 이루어진다.
먼저, 수정이 요구되는 영상 영역을 인식한다(제10 단계). 디지털 카메라로 촬영한 영상 중에서 잡음이나 삭제하고 싶은 물체 등이 나타난 영상 영역에 대해 사용자의 인식 범위의 지정이 있으면, 해당 영상 영역을 인식한다.
제10 단계 후에, 인식된 영상 영역을 수정한다(제12 단계). 디지털 카메라에 촬영된 영상 중에서 잡음 또는 삭제하고 싶은 물체 등에 대해 제10 단계에서 영상 영역이 인식되면, 인식된 영상 영역을 수정한다.
제12 단계에 대한 일 실시예로서 블러링(blurring)하는 방법이 있다. 블러링이란, 이미지를 부드럽게 보이도록 하기 위해 고주파 성분을 제거하는 방식을 이용한 화상 처리 방법을 말한다. 저주파는 화소값의 변화율이 작은 주파수이고, 고주파는 화소값의 변화율이 큰 주파수를 말한다. 영상에서 고주파 성분을 제거하게 되면, 화소값의 변화율이 작아지므로 이웃 화소들에 대하여 극단적인 값들이 줄어들어 영상이 부드럽게 처리된다. 따라서, 블러링을 통해 영상에 나타나는 미세한 잡음이나 잡티 등의 두드러짐을 약화시켜서 영상을 수정할 수 있다.
도 2는 도 1에 도시된 제12 단계에 대한 본 발명에 의한 또 다른 일 실시예(12A)를 설명하기 위한 플로우차트로서, 수정이 요구되는 영상 영역의 색 정보와 유사한 색 정보를 갖는 영상 영역을 복사하여 색 정보를 치환하고 블러링하는 단계(제20 ~ 제32 단계들)로 이루어진다.
제10 단계 후에, 인식된 영상 영역의 크기를 갖는 제1 필터 창을 형성한다( 제20 단계). 제1 필터 창의 크기는 인식된 영상 영역의 크기에 따라 조정이 가능하다.
제20 단계 후에, 인식된 영상 영역의 색 정보와 유사한 색 정보를 갖는 영상 영역에 제1 필터 창을 배치시킨다(제22 단계). 예를 들어, 영상에 나타난 잡티를 제거하기 위해 잡티 주위의 색 정보와 유사한 색 정보를 갖는 영상 영역에 제1 필터 창을 배치한다.
제22 단계 후에, 제1 필터 창이 배치된 영상 영역을 복사한다(제24 단계). 예를 들어, 잡티 주위의 색 정보와 유사한 색 정보를 갖는 곳에 배치된 제1 필터 창만큼의 영상 영역을 복사한다.
제24 단계 후에, 복사된 영상 영역을 정보로서 갖는 제1 필터 창을 인식된 영상 영역에 배치시킨다(제26 단계). 예를 들어, 제1 필터 창의 크기만큼 복사된 영상 영역을 잡티 주위의 영상 영역에 덮어씌우는 것이다.
제26 단계 후에, 인식된 영상 영역의 색 정보를 제1 필터 창이 갖고 있는 복사된 영상 영역의 색 정보로 치환한다(제28 단계). 예를 들어, 잡티가 존재하는 영상 영역의 색 정보를 복사된 영상 영역의 색 정보로 치환함으로써, 잡티가 제거된 영상 영역을 얻는다.
제28 단계 후에, 치환된 영상 영역을 포함하는 주변 영상 영역을 인식한다(제30 단계). 예를 들어, 치환된 영상 영역은 전술한 제1 필터 창에 의해 잡티는 제거된 상태이지만, 치환된 영상 영역의 테두리부분이 다른 영상 영역과 조화를 이루지 못할 수 있다. 이렇게 조화를 이루지 못하는 부분을 조화시키기 위해, 전술한 치환된 영상 영역의 테두리 부분을 포함하는 영역을 인식하여 블러링할 필요가 있다. 제1 필터 창의 테두리 부분을 포함하는 영상 영역을 주변 영상 영역이라 칭하며, 이러한 주변 영상 영역을 사용자의 영역 지정에 의해 인식한다.
제30 단계 후에, 인식된 주변 영상 영역을 블러링한다(제32 단계). 블러링을 통해 전술한 치환된 영상 영역의 테두리 부분에 나타나는 미세한 영상의 부조화를 제거할 수 있다.
도 3은 도 1에 도시된 본 발명에 의한 촬영 영상 수정방법에서 인식된 영상 영역을 확대하는 단계를 더 구비하는 플로우차트로서, 확대된 영상 영역을 수정하는 단계(제40 ~ 제44 단계들)로 이루어진다.
먼저, 촬영된 영상에서 수정이 요구되는 영상 영역을 인식한다(제40 단계).
제40 단계 후에, 인식된 영상 영역을 확대한다(제42 단계). 인식된 영상 영역을 확대한다는 것은 인식된 영상의 각 픽셀의 좌표를 확대하려는 배율만큼 이동하는 것을 말한다. 영상 확대 시 데이터 값을 할당받지 못한 픽셀들이 존재하는데, 빈 픽셀에 적당한 데이터 값들을 할당하여 확대하는 보간법이 이용될 수 있다.
제42 단계 후에, 확대된 영상 영역을 수정한다(제44 단계).
도 4는 도 3에 도시된 제44 단계에 대한 본 발명에 의한 일 실시예(44A)를 설명하기 위한 플로우차트로서, 확대된 영상 영역에서 세부 수정 영역을 인식하여 블러링하는 단계(제50 및 제52 단계들)로 이루어진다.
제42 단계 후에, 확대된 영상 영역에서 세부 수정 영역을 인식한다(제50 단계). 세부 수정 영역이란, 확대된 영상 영역 중에서 사용자가 수정하기를 원하는 영상 영역을 말한다. 사용자에 의해 지정되는 영역에 대해 세부 수정 영역으로서 인식한다.
제50 단계 후에, 인식된 세부 수정 영역을 블러링한다(제52 단계).
도 5는 도 3에 도시된 제44 단계에 대한 본 발명에 의한 또 다른 일 실시예(44B)를 설명하기 위한 플로우차트로서, 세부 수정 영역의 색 정보와 유사한 색 정보를 갖는 영상 영역을 복사하여 색 정보를 치환하고 블러링하는 단계(제60 ~ 제72 단계들)로 이루어진다.
제42 단계 후에, 확대된 영상 영역에서 세부 수정 영역의 크기를 갖는 제2 필터 창을 형성한다(제60 단계). 제2 필터 창의 크기는 세부 수정 영역의 크기에 따라 조정이 가능하다.
제60 단계 후에, 세부 수정 영역의 색 정보와 유사한 색 정보를 갖는 영상 영역에 제2 필터 창을 배치시킨다(제62 단계). 예를 들어, 잡티 등이 존재하는 세부 수정 영역을 수정하기 위해 잡티 주위의 색 정보와 유사한 색 정보를 갖는 영상 영역에 제2 필터 창을 배치한다.
제62 단계 후에, 제2 필터 창이 배치된 영상 영역을 복사한다(제64 단계). 예를 들어, 잡티 주위의 색 정보와 유사한 색 정보를 갖는 곳에 배치된 제2 필터 창만큼 영상 영역을 복사한다.
제64 단계 후에, 복사된 영상 영역을 정보로서 갖는 제2 필터 창을 세부 수정 영역에 배치시킨다(제66 단계). 예를 들어, 제2 필터 창만큼 복사된 영상 영역을 잡티 등이 존재하는 세부 수정 영역에 덮어씌운다.
제66 단계 후에, 제2 필터 창이 배치된 세부 수정 영역의 색 정보를 복사된 영상 영역의 색 정보로 치환한다(제68 단계). 예를 들어, 잡티가 존재하는 세부 수정 영역의 색 정보를 전술한 복사된 영상 영역의 색 정보로 치환한다. 결국, 잡티가 존재하는 영상 영역으로부터 색 정보 교환을 통해 잡티가 제거된 영상 영역을 얻는다.
제68 단계 후에, 치환된 세부 수정 영역을 포함하는 주변 영상 영역을 인식한다(제70 단계). 예를 들어, 치환된 세부 수정 영역은 전술한 제2 필터 창에 의해 잡티는 제거된 상태이지만, 치환된 세부 수정 영역의 테두리 부분이 다른 영상 영역과 조화를 이루지 못하는 경우가 있다. 이렇게 조화를 이루지 못하는 부분을 조화시키기 위해, 치환된 세부 수정 영역의 테두리 부분을 포함하는 영역인 주변 영상 영역을 인식한다.
제70 단계 후에, 인식된 주변 영상 영역을 블러링한다(제32 단계). 블러링을 통해 전술한 치환된 세부 수정 영역의 테두리 부분에 나타나는 미세한 영상 차이를 제거할 수 있다.
이하, 전술한 본 발명에 관한 촬영 영상 수정장치의 구성 및 동작을 첨부된 도면을 참조하여 다음과 같이 설명한다.
도 6은 본 발명에 의한 촬영 영상 수정장치를 설명하기 위한 일 실시예의 블록도로서, 영역 인식부(100) 및 영역 수정부(120)로 구성된다.
제10 단계를 수행하기 위해, 영역 인식부(100)는 촬영된 영상 영역에서 수정이 요구되는 영상 영역을 인식하고, 인식된 영상 영역을 출력한다. 예를 들어, 영 역 인식부(100)는 입력단자 IN1을 통해 입력된 디지털 카메라로 촬영한 영상 중에서 잡음이나 삭제하고 싶은 물체 등이 나타난 영상 영역에 대해 사용자가 범위를 지정하면, 지정된 영상 영역을 인식하고, 인식된 결과를 영역 수정부(120)로 출력한다.
제12 단계를 수행하기 위해, 영역 수정부(120)는 영역 인식부(100)로부터 입력받은 인식된 영상 영역을 수정하고, 수정된 결과를 출력한다. 영역 수정부(120)는 인식된 영상 영역을 수정하고, 수정된 결과를 출력 단자 OUT1을 통해 출력한다.
영역 수정부(120)에 대한 일 실시예로서 영역 인식부(100)로부터 입력받은 인식된 영상 영역에 대해 블러링하고, 블러링한 영상 영역을 출력하는 블러링부(미도시)를 구비한 영역 수정부(120)를 생각할 수 있다.
도 7은 도 6에 도시된 영역 수정부(140)의 본 발명에 따른 바람직한 또 다른 일 실시예(120A)의 블록도로서, 필터 창 형성부(200), 필터 창 이동부(210), 영역 복사부(220), 색 정보 치환부(230), 주변 영역 인식부(240) 및 주변 영역 블러링부(250)로 구성된다.
제20 단계를 수행하기 위해, 필터 창 형성부(200)는 인식된 영상 영역의 크기를 갖는 제1 필터 창을 형성하고, 형성된 제1 필터 창을 출력한다. 필터 창 형성부(200)가 형성하는 창의 크기는 몇 개의 선택적인 창으로 마련될 수도 있고, 크기가 조정되도록 하는 것일 수도 있다. 예를 들어, 필터 창 형성부(200)는 인식된 영상 영역을 영역 인식부(100)로부터 입력단자 IN2를 통해 입력받아서, 인식된 영상 영역의 크기를 갖는 제1 필터 창을 형성하고, 형성된 제1 필터 창을 필터 창 이동 부(210)로 출력한다.
제22 단계 및 제26 단계를 수행하기 위해, 필터 창 이동부(210)는 필터 창 형성부(200)로부터 입력받은 형성된 제1 필터 창을 디지털 카메라의 화면상에서 이동시키고, 이동된 결과를 출력한다. 예를 들어, 필터 창 이동부(210)는 필터 창 형성부(200)로부터 입력받은 형성된 제1 필터 창에 대해 전술한 인식된 영상 영역의 색 정보와 유사한 색 정보를 갖는 영상 영역으로 제1 필터 창을 이동시키고, 이동된 결과를 영역 복사부(220)로 출력한다. 또한, 필터 창 이동부(210)는 복사된 영상 영역을 포함하고 있는 제1 필터 창을 인식된 영상 영역으로 이동시키고, 이동된 결과를 색 정보 치환부(230)로 출력한다.
제24 단계를 수행하기 위해, 영역 복사부(220)는 제1 필터 창의 이동된 결과를 입력받아서, 제1 필터 창이 배치된 영상 영역을 복사하고, 복사된 영상 영역을 출력한다. 예를 들어, 영역 복사부(220)는 필터 창 이동부(210)로부터 입력된 제1 필터 창의 이동된 결과를 입력받아서 제1 필터 창이 배치된 영상 영역에 해당하는 색 정보를 복사하고, 복사된 결과를 다시 필터 창 이동부(210)로 출력한다.
제28 단계를 수행하기 위해, 색 정보 치환부(230)는 복사된 영상 영역을 포함하는 제1 필터 창의 이동된 결과를 필터 창 이동부(210)로부터 입력받아서, 인식된 영상 영역의 색 정보를 복사된 영상 영역의 색 정보로 치환하고, 치환된 결과를 출력한다. 예를 들어, 색 정보 치환부(230)는 복사된 영상 영역의 제1 필터 창에 대한 이동된 결과를 필터 창 이동부(210)로부터 입력받아서, 인식된 영상 영역의 색 정보를 영역 복사부(220)에 의해 복사된 영상 영역의 색 정보로 치환하고, 치환 된 결과를 주변 영역 인식부(240)로 출력한다.
제30 단계를 수행하기 위해, 주변 영역 인식부(240)는 색 정보 치환부(230)로부터 치환된 영상 영역을 입력받아서, 치환된 영상 영역을 포함하는 주변 영상 영역을 인식하고, 인식된 주변 영상 영역을 출력한다. 예를 들어, 주변 영역 인식부(240)는 주변 영상 영역인 제1 필터 창의 테두리 부분을 포함하는 영상 영역을 을 인식한다. 주변 영상 영역은 사용자에 의해 영역의 크기가 조절될 수 있다.
제32 단계를 수행하기 위해, 주변 영역 블러링부(250)는 주변 영역 인식부(240)로부터 입력받은 인식된 주변 영상 영역을 블러링하고, 블러링한 주변 영상 영역을 출력한다. 예를 들어, 주변 영역 블러링부(250)는 주변 영역 인식부(240)로부터 입력받은 인식된 주변 영상 영역을 블러링하고, 블러링한 주변 영상 영역을 출력단자 OUT2를 통해 출력한다. 따라서, 블러링을 통해 영상에 나타나는 미세한 잡음 등의 차이를 제거할 수 있다.
도 8은 본 발명에 의한 촬영 영상 수정장치에서 영역 확대부(120)가 더 구비된 또 다른 일 실시예의 블록도이다.
제40 단계를 수행하기 위해, 영역 인식부(300)는 촬영된 영상 영역에서 수정이 요구되는 영상 영역을 인식하고, 인식된 영상 영역을 출력한다. 예를 들어, 영역 인식부(300)는 입력단자 IN3을 통해 입력된 디지털 카메라로 촬영한 영상 중에서 잡음이나 삭제하고 싶은 물체 등이 존재하는 영상 영역에 대해 사용자가 대략적인 범위를 지정하면, 지정된 영상 영역을 인식하고, 인식된 결과를 영역 확대부(320)로 출력한다.
제42 단계를 수행하기 위해, 영역 확대부(320)는 영역 인식부(300)로부터 입력받은 인식된 영상 영역을 확대하고, 확대된 영상 영역을 출력한다. 예를 들어, 영역 확대부(320)는 영상의 크기를 확대를 위한 방법으로 최근접 이웃 보간법(nearest neighbor interpolation) 또는 0차 보간법(zero - order interpolation)을 사용한다. 최근접 이웃 보간법은 확대시 빈 픽셀에 이웃한 픽셀 값을 할당하는 방법이고, 쌍일차 보간법은 확대 영상에서 주변 픽셀들의 평균값을 계산하여 할당 받지 못한 빈 픽셀에 대입시키는 방법이다. 영역 확대부(320)는 영역 인식부(300)로부터 입력받은 인식된 영상 영역을 확대하고, 확대된 영상 영역을 영역 수정부(340)로 출력한다.
제44 단계를 수행하기 위해, 영역 수정부(340)는 영역 확대부(320)로부터 입력받은 확대된 영상 영역을 수정하고, 수정된 결과를 출력한다. 영역 수정부(340)는 인식된 영상 영역을 수정하고, 수정된 결과를 출력 단자 OUT3을 통해 출력한다
도 9는 도 8에 도시된 영역 수정부(340)의 본 발명에 따른 바람직한 일 실시예(340A)의 블록도(140B)의 블록도로서, 세부 수정 영역 인식부(400) 및 세부 수정 여역 블러링부(420)로 구성된다.
세부 수정 영역 인식부(400)는 확대된 영상 영역에서 세부 수정 영역을 인식하고, 인식된 세부 수정 영역을 출력한다. 예를 들어, 세부 수정 영역 인식부(400)는 영역 확대부(320)로부터 확대된 영상 영역에 대해 입력단자IN4를 통해 입력받아서, 확대된 영상 영역 중에서 사용자에 의해 범위가 지정된 세부 수정 영역을 인식하고, 인식된 세부 수정 영역을 출력한다.
세부 수정 영역 블러링부(420)는 세부 수정 영역 인식부(400)로부터 입력받은 인식된 세부 수정 영역을 블러링하고, 블러링된 세부 수정 영역을 출력한다. 예를 들어, 세부 수정 영역 블러링부(420)는 세부 수정 영역 인식부(400)로부터 입력받은 세부 수정 영역을 블러링하고, 블러링된 세부 수정 영역을 출력단자 OUT4를 통해 출력한다.
도 10은 도 8에 도시된 영역 수정부(340)의 본 발명에 따른 바람직한 또 다른 일 실시예(340B)의 블록도로서, 도 7과 마찬가지로 필터 창 형성부(500), 필터 창 이동부(510), 영역 복사부(520), 색 정보 치환부(530), 주변 영역 인식부(540) 및 주변 영역 블러링부(550)로 구성된다.
제60 단계를 수행하기 위해, 필터 창 형성부(500)는 확대된 영상 영역에서 세부 수정 영역의 크기를 갖는 제2 필터 창을 형성하고, 형성된 제2 필터 창을 출력한다. 필터 창 형성부(500)가 형성하는 창의 크기는 몇 개의 선택적인 창으로 마련될 수도 있고, 크기가 조절되도록 하는 것일 수도 있다. 예를 들어, 필터 창 형성부(500)는 입력 단자 IN5를 통해 확대된 영상 영역을 영역 확대부(320)로부터 입력받아서, 확대된 영상 영역에서 세부 수정 영역의 크기를 갖는 제2 필터 창을 형성하고, 형성된 제2 필터 창을 필터 창 이동부(510)로 출력한다.
제62 단계 및 제66 단계를 수행하기 위해, 필터 창 이동부(510)는 필터 창 형성부(500)로부터 입력받은 형성된 제2 필터 창을 디지털 카메라의 화면상에서 이동시키고, 이동된 결과를 출력한다. 예를 들어, 필터 창 이동부(510)는 필터 창 형성부(500)로부터 입력받은 형성된 제2 필터 창에 대해 전술한 세부 수정 영역의 색 정보와 유사한 색 정보를 갖는 영상 영역으로 제2 필터 창을 이동시키고, 이동된 결과를 영역 복사부(520)로 출력한다. 또한, 필터 창 이동부(510)는 복사된 영상 영역을 포함하고 있는 제2 필터 창을 세부 수정 영역으로 이동시키고, 이동된 결과를 색 정보 치환부(530)로 출력한다.
제64 단계를 수행하기 위해, 영역 복사부(520)는 제2 필터 창의 이동된 결과를 입력받아서, 제2 필터 창이 배치된 영상 영역을 복사하고, 복사된 영상 영역을 출력한다. 예를 들어, 영역 복사부(520)는 필터 창 이동부(510)로부터 입력된 제2 필터 창의 이동된 결과를 입력받아서 제2 필터 창이 배치된 영상 영역에 해당하는 색 정보를 복사하고, 복사된 결과를 다시 필터 창 이동부(510)로 출력한다.
제68 단계를 수행하기 위해, 색 정보 치환부(530)는 복사된 영상 영역을 포함하는 제2 필터 창의 이동된 결과를 필터 창 이동부(510)로부터 입력받아서, 세부 수정 영역의 색 정보를 복사된 영상 영역의 색 정보로 치환하고, 치환된 결과를 출력한다. 예를 들어, 색 정보 치환부(530)는 복사된 영상 영역의 제2 필터 창에 대한 이동된 결과를 필터 창 이동부(510)로부터 입력받아서, 세부 수정 영역의 색 정보를 영역 복사부(520)에 의해 복사된 영상 영역의 색 정보로 치환하고, 치환된 결과를 주변 영역 인식부(540)로 출력한다.
제70 단계를 수행하기 위해, 주변 영역 인식부(540)는 색 정보 치환부(530)로부터 치환된 영상 영역을 입력받아서, 치환된 영상 영역을 포함하는 주변 영상 영역을 인식하고, 인식된 주변 영상 영역을 출력한다. 예를 들어, 주변 영역 인식부(540)는 주변 영상 영역인 제2 필터 창의 테두리 부분을 포함하는 영상 영역을 을 인식한다. 주변 영상 영역은 사용자에 의해 영역의 크기가 조정될 수 있다.
제72 단계를 수행하기 위해, 주변 영역 블러링부(550)는 주변 영역 인식부(540)로부터 입력받은 인식된 주변 영상 영역을 블러링하고, 블러링한 주변 영상 영역을 출력한다. 예를 들어, 주변 영역 블러링부(550)는 주변 영역 인식부(540)로부터 입력받은 인식된 주변 영상 영역을 블러링하고, 블러링한 주변 영상 영역을 출력단자 OUT5를 통해 출력한다. 따라서, 블러링을 통해 영상에 나타나는 미세한 잡음 등의 차이를 제거할 수 있다.
도 11은 디지털 카메라의 후면에 마련된 본 발명과 관련된 기능키들의 예시를 나타내는 도면으로서, 영상 표시부(600), 필터 창 이동키(610), 블러링 키(620) 및 잡티 제거키(630)를 포함한다. 영상 표시부(600)는 촬영된 영상을 디스플레이하는 수단이고, 필터 창 이동키(610)는 전술한 필터창 이동부(210 및 510)에 의한 필터 창의 이동을 지시하는 키이고, 블러링 키(620)는 전술한 블러링부(미도시) 또는 세부 수정영역 블러링부(420)의 기능을 지시하는 키이고, 잡티 제거키(630)는 전술한 필터 창 형성부(200 및 500), 필터창 이동부(210 및 510), 영역 복사부(220 및 520) 및 색정보 치환부(230 및 530)의 기능을 지시하는 키이다. 영상 표시부(600)는 도 10에 도시된 필터창 형성부(500)에 의해 선택적으로 형성된 필터창(604)과, 블러링 키(620)나 잡티 제거키(630)에 의한 블러링 또는 잡티 제거 모드(602)를 디스플레이한 상태를 표현하고 있다.
도 12는 본 발명에 의한 도 8 및 도10에서 도시된 촬영영상 수정 장치에서 잡티 등을 제거하는 과정을 설명하기 위해 디스플레이된 상태를 나타내는 예시적인 도면이다.
도 12의 (a)는 촬영된 영상이 영상 표시부(600)에 디스플레이된 상태를 나타내는 도면으로서, 사용자는 이 상태에서 잡티 등을 제거하고자 영역을 판단하게 된다. 도 12의 (b)는 잡티 등일 존재하는 곳에 대해 사용자가 자세한 사항을 파악하기 위해 도 11의 잡티 제거키(630)를 선택하게 되었을 때, 도 8에 도시된 영역 인식부(300)에 의해 특정영역을 인식한 상태를 나타내는 도면이다. 도 12의 (c)는 도 8에 도시된 영역 확대부(320)에 의해 전술한 인식된 특정영역을 확대한 상태를 나타내는 도면으로서, 사용자는 확대된 영상을 통해 잡티 등을 제거할 영역을 보다 명확히 파악할 수 있다. 도 12의 (d)는 얼굴에 존재하는 잡티의 소정 영역(㉠) 만큼에 해당하는 유사한 색 정보를 갖는 영상영역(㉡)에 도 11의 필터창 이동키(610)에 의해 제2 필터창이 배치된 상태를 나타내는 도면이다. 이때, 유사한 색 정보를 갖는 영상영역(㉡)에 해당하는 제2 필터창은 도 10에 도시된 필터창 형성부(500)에 의해 형성된 것이다.
도 12의 (e)는 유사한 색 정보를 갖는 영상 영역(㉡)을 잡티가 존재하는 소정 영역(㉠)으로 이동시킨 상태를 나타내는 도면으로서, 유사한 색 정보를 갖는 영상 영역(㉡)이 도 10에 도시된 영역 복사부(520)에 의해 복사되고 필터창 이동부(510)에 의해 이동되어 도 12의 (e)와 같이 디스플레이 된다. 도 12의 (f)는 잡티가 존재하는 소정 영역(㉠)이 이동된 유사한 색 정보를 갖는 영상 영역(㉡)으로 치환된 상태를 나타내는 도면으로서, 도 10에 도시된 색정보 치환부(530)에 의해 치환되어 잡티가 제거된 영상으로 디스플레이된다.
이렇게 잡티가 제거된 영상 영역에 대해 필요하다면 블러링 과정을 추가적으로 수행하도록 하여 원하는 영상을 얻을 수도 있다.
이상에서 설명한 바와 같이, 본 발명에 의한 촬영 영상 수정방법 및 장치는 휴대가 간편한 디지털 카메라 전용 프린터가 공급되고 있는 상황에서 컴퓨터를 이용하지 않고도 디지털 카메라 자체를 이용해 촬영한 영상을 간편하게 수정할 수 있는 효과를 갖는다.

Claims (18)

  1. 디지털 카메라로 촬영한 영상을 수정하는 촬영 영상 수정방법에 있어서,
    (a) 상기 촬영된 영상에서 수정이 요구되는 영상 영역을 인식하는 단계; 및
    (b) 상기 인식된 영상 영역을 블러링하여 수정하는 단계를 구비하고,
    상기 (a) 및 (b) 단계들은 상기 디지털 카메라에서 자체적으로 수행되는 것을 특징으로 하고,
    상기 (b) 단계는
    (b1) 상기 인식된 영상 영역의 크기를 갖는 제1 필터 창을 형성하는 단계;
    (b2) 상기 인식된 영상 영역의 색 정보와 유사한 색 정보를 갖는 영상 영역에 상기 제1 필터 창을 배치시키는 단계;
    (b3) 상기 제1 필터 창이 배치된 영상 영역을 복사하는 단계;
    (b4) 상기 복사된 영상 영역을 정보로서 갖는 상기 제1 필터 창을 상기 인식된 영상 영역에 배치시키는 단계; 및
    (b5) 상기 인식된 영상 영역의 색 정보를 상기 제1 필터 창이 갖고 있는 상기 복사된 영상 영역의 색 정보로 치환하는 단계를 구비하는 것을 특징으로 하는 촬영 영상 수정방법.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서, 상기 (b) 단계는
    상기 (b5) 단계 후에, 상기 치환된 영상 영역을 포함하는 주변 영상 영역을 인식하는 단계; 및
    상기 인식된 주변 영상 영역을 블러링하는 단계를 더 구비하는 것을 특징으로 하는 촬영 영상 수정방법.
  5. 제1 항에 있어서, 촬영 영상 수정방법은
    상기 (a) 단계 후에, 상기 인식된 영상 영역을 확대하는 단계를 더 구비하고,
    상기 (b) 단계에서 확대된 영상 영역을 수정하는 것을 특징으로 하는 촬영 영상 수정방법.
  6. 제5 항에 있어서, 상기 (b) 단계는
    상기 확대된 영상 영역에서 세부 수정 영역을 인식하는 단계;
    상기 인식된 세부 수정 영역을 블러링하는 단계를 구비하는 것을 특징으로 하는 촬영 영상 수정방법.
  7. 제5 항에 있어서, 상기 (b) 단계는
    (b6) 상기 확대된 영상 영역에서 세부 수정 영역의 크기를 갖는 제2 필터 창을 형성하는 단계;
    (b7) 상기 세부 수정 영역의 색 정보와 유사한 색 정보를 갖는 영상 영역에 상기 제2 필터 창을 배치시키는 단계;
    (b8) 상기 제2 필터 창이 배치된 영상 영역을 복사하는 단계;
    (b9) 상기 복사된 영상 영역을 정보로서 갖는 상기 제2 필터 창을 상기 세부 수정 영역에 배치시키는 단계; 및
    (b10) 상기 제2 필터 창이 배치된 상기 세부 수정 영역의 색 정보를 상기 복사된 영상 영역의 색 정보로 치환하는 단계를 구비하는 것을 특징으로 하는 촬영 영상 수정방법.
  8. 제7 항에 있어서, 상기 (b) 단계는
    상기 (b10) 단계 후에, 상기 치환된 세부 수정 영역을 포함하는 주변 영상 영역을 인식하는 단계; 및
    상기 인식된 주변 영상 영역을 블러링하는 단계를 더 구비하는 것을 특징으로 하는 촬영 영상 수정방법.
  9. 디지털 카메라로 촬영한 영상을 수정하는 촬영 영상 수정장치에 있어서,
    상기 촬영된 영상에서 수정이 요구되는 영상 영역을 인식하고, 상기 인식된 영상 영역을 출력하는 영역 인식부; 및
    상기 영역 인식부로부터 입력받은 상기 인식된 영상 영역을 블러링하여 수정하고, 수정된 결과를 출력하는 영역 수정부를 구비하고,
    상기 영역 인식부 및 상기 영역 수정부가 상기 디지털 카메라에 마련되는 것을 특징으로 하고,
    상기 영역 수정부는
    상기 인식된 영상 영역의 크기를 갖는 제1 필터 창을 형성하고, 형성된 제1 필터 창을 출력하는 필터 창 형성부;
    상기 필터 창 형성부로부터 입력받은 상기 형성된 제1 필터 창을 디지털 카메라의 화면상에서 이동시키고, 이동된 결과를 출력하는 필터 창 이동부;
    상기 제1 필터 창의 이동된 결과를 입력받아서, 상기 제1 필터 창이 배치된 영상 영역을 복사하고, 복사된 영상 영역을 출력하는 영역 복사부; 및
    상기 복사된 영상 영역을 포함하는 제1 필터 창의 이동된 결과를 상기 필터 창 이동부로부터 입력받아서, 상기 인식된 영상 영역의 색 정보를 상기 복사된 영상 영역의 색 정보로 치환하고, 치환된 영상 영역을 출력하는 색 정보 치환부를 구비하는 것을 특징으로 하는 촬영 영상 수정장치.
  10. 삭제
  11. 삭제
  12. 제9항에 있어서, 상기 필터창 형성부는
    창의 크기가 몇 개의 선택적인 크기를 갖는 것을 특징으로 하는 촬영 영상 수정장치.
  13. 제9항에 있어서, 상기 영역 수정부는
    상기 색 정보 치환부로부터 상기 치환된 영상 영역을 입력받아서, 상기 치환된 영상 영역을 포함하는 주변 영상 영역을 인식하고, 인식된 주변 영상 영역을 출력하는 주변 영역 인식부; 및
    상기 주변 영역 인식부로부터 입력받은 상기 인식된 주변 영상 영역을 블러링하고, 블러링한 주변 영상 영역을 출력하는 주변 영역 블러링부를 더 구비하는 것을 특징으로 하는 촬영 영상 수정장치.
  14. 제9 항에 있어서, 촬영 영상 수정장치는
    상기 영역 인식부로부터 입력받은 상기 인식된 영상 영역을 확대하고, 확대된 영상 영역을 출력하는 영역 확대부를 더 구비하고,
    상기 영역 수정부에서 상기 영역 확대부로부터 입력받은 상기 확대된 영상 영역을 수정하고, 수정된 영상 영역을 출력하는 것을 특징으로 하는 촬영 영상 수정장치.
  15. 제14 항에 있어서, 상기 영역 수정부는
    상기 확대된 영상 영역에서 세부 수정 영역을 인식하고, 인식된 세부 수정 영역을 출력하는 세부 수정 영역 인식부; 및
    상기 세부 수정 영역 인식부로부터 입력받은 상기 인식된 세부 수정 영역을 블러링하고, 블러링된 세부 수정 영역을 출력하는 세부 수정 영역 블러링부를 구비하는 것을 특징으로 하는 촬영 영상 수정장치.
  16. 제14 항에 있어서, 상기 영역 수정부는
    상기 확대된 영상 영역에서 세부 수정 영역의 크기를 갖는 제2 필터 창을 형성하고, 형성된 제2 필터 창을 출력하는 필터 창 형성부;
    상기 필터 창 형성부로부터 입력받은 상기 형성된 제2 필터 창을 디지털 카메라의 화면상에서 이동시키고, 이동된 결과를 출력하는 필터 창 이동부;
    상기 제2 필터 창의 이동된 결과를 입력받아서, 상기 제2 필터 창이 배치된 영상 영역을 복사하고, 복사된 영상 영역을 출력하는 영역 복사부; 및
    상기 복사된 영상 영역을 포함하는 제2 필터 창의 이동된 결과를 상기 필터 창 이동부로부터 입력받아서, 상기 세부 수정 영역의 색 정보를 상기 복사된 영상 영역의 색 정보로 치환하고, 치환된 영상 영역을 출력하는 색 정보 치환부를 구비하는 것을 특징으로 하는 촬영 영상 수정장치.
  17. 제16 항에 있어서, 상기 필터창 형성부는
    창의 크기가 몇 개의 선택적인 크기를 갖는 것을 특징으로 하는 촬영 영상 수정장치.
  18. 제16 항에 있어서, 상기 영역 수정부는
    상기 색 정보 치환부로부터 상기 치환된 영상 영역을 입력받아서, 상기 치환된 영상 영역을 포함하는 주변 영상 영역을 인식하고, 인식된 주변 영상 영역을 출력하는 주변 영역 인식부; 및
    상기 주변 영역 인식부로부터 입력받은 상기 인식된 주변 영상 영역을 블러링하고, 블러링한 주변 영상 영역을 출력하는 주변 영역 블러링부를 더 구비하는 것을 특징으로 하는 촬영 영상 수정장치.
KR1020020063530A 2002-10-17 2002-10-17 촬영 영상 수정방법 및 장치 KR100919979B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020020063530A KR100919979B1 (ko) 2002-10-17 2002-10-17 촬영 영상 수정방법 및 장치
US10/688,517 US7496238B2 (en) 2002-10-17 2003-10-17 Method and apparatus for retouching photographed image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020020063530A KR100919979B1 (ko) 2002-10-17 2002-10-17 촬영 영상 수정방법 및 장치

Publications (2)

Publication Number Publication Date
KR20040034886A KR20040034886A (ko) 2004-04-29
KR100919979B1 true KR100919979B1 (ko) 2009-10-05

Family

ID=32226185

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020020063530A KR100919979B1 (ko) 2002-10-17 2002-10-17 촬영 영상 수정방법 및 장치

Country Status (2)

Country Link
US (1) US7496238B2 (ko)
KR (1) KR100919979B1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4756876B2 (ja) * 2004-06-09 2011-08-24 キヤノン株式会社 画像表示制御装置、画像表示制御方法、プログラム、及び記憶媒体
JP4931219B2 (ja) * 2007-03-02 2012-05-16 キヤノン株式会社 情報処理装置及び情報処理方法
US11294556B1 (en) * 2021-01-05 2022-04-05 Adobe Inc. Editing digital images using multi-panel graphical user interfaces

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11355705A (ja) * 1998-06-11 1999-12-24 Sharp Corp 画像処理装置付デジタルカメラ
JP2000049984A (ja) * 1998-07-27 2000-02-18 Canon Inc 画像処理装置及び画像処理方法
KR20010047297A (ko) * 1999-11-19 2001-06-15 윤종용 디지털 스틸 카메라
JP2002027368A (ja) * 2000-07-07 2002-01-25 Hitachi Ltd 画像合成印刷装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ATE18483T1 (de) * 1982-12-11 1986-03-15 Hell Rudolf Dr Ing Gmbh Verfahren und einrichtung zur kopierenden retusche bei der elektronischen farbbildreproduktion.
US5555194A (en) * 1994-07-26 1996-09-10 Eastman Kodak Company Cloning technique for digital image retouching
US5966122A (en) 1996-03-08 1999-10-12 Nikon Corporation Electronic camera
US6167469A (en) * 1998-05-18 2000-12-26 Agilent Technologies, Inc. Digital camera having display device for displaying graphical representation of user input and method for transporting the selected digital images thereof
USH2003H1 (en) * 1998-05-29 2001-11-06 Island Graphics Corporation Image enhancing brush using minimum curvature solution
US6285410B1 (en) 1998-09-11 2001-09-04 Mgi Software Corporation Method and system for removal of flash artifacts from digital images
KR100293106B1 (ko) 1998-12-31 2001-06-15 김석균 된장제조용발효조.
JP2002203238A (ja) 2000-12-28 2002-07-19 Kao Corp 素肌のシミュレーション画像の形成方法
US20030210335A1 (en) * 2002-05-07 2003-11-13 Carau Frank Paul System and method for editing images on a digital still camera

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11355705A (ja) * 1998-06-11 1999-12-24 Sharp Corp 画像処理装置付デジタルカメラ
JP2000049984A (ja) * 1998-07-27 2000-02-18 Canon Inc 画像処理装置及び画像処理方法
KR20010047297A (ko) * 1999-11-19 2001-06-15 윤종용 디지털 스틸 카메라
JP2002027368A (ja) * 2000-07-07 2002-01-25 Hitachi Ltd 画像合成印刷装置

Also Published As

Publication number Publication date
US20040091237A1 (en) 2004-05-13
KR20040034886A (ko) 2004-04-29
US7496238B2 (en) 2009-02-24

Similar Documents

Publication Publication Date Title
EP1922693B1 (en) Image processing apparatus and image processing method
US8023743B2 (en) Image processing apparatus and image processing method
EP0824246A2 (en) Automatic image cropping
JP4368513B2 (ja) 画像処理方法および装置並びに記録媒体
JP2002262094A (ja) 画像処理方法及び画像処理装置
KR101059404B1 (ko) 라인 또는 텍스트-기반 이미지 프로세싱 툴
US20060152596A1 (en) Noise cleaning sparsely populated color digital images
JP2010010976A (ja) 写真画像処理方法、写真画像処理プログラム、及び写真画像処理装置
KR100919979B1 (ko) 촬영 영상 수정방법 및 장치
JP4375069B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP2005051379A (ja) 画像処理装置及び画像処理方法
JPH1173493A (ja) 画像の効率的な修正方法
JP2005063022A (ja) ノイズ画素マップ作成方法とその方法を実施する装置とプログラム及び写真プリント装置
JP2005117399A (ja) 画像処理装置
JP2000022939A (ja) 画像縮小装置及び画像縮小プログラムを記録した記録媒体
KR20020084321A (ko) 템플릿을 이용한 실시간 인물합성방법
CN111698389A (zh) 图像处理设备、摄像设备、图像处理方法以及存储介质
JP4156322B2 (ja) 画像処理方法および装置並びにプログラム
JP6083946B2 (ja) 画像処理装置及び画像処理装置の制御方法
JP2019033437A (ja) 画像処理装置及び画像処理装置の制御方法、記憶媒体、プログラム
JP2004253909A (ja) 画像処理方法
JP4470172B2 (ja) 画像処理装置
JP2004240955A (ja) 画像処理方法、画像処理装置、画像処理プログラム及び画像記録装置
US20050243098A1 (en) Photo movie producing method and apparatus
JP4314525B2 (ja) 補正画像表示方法及び装置

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20021017

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20070928

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20021017

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20080529

Patent event code: PE09021S01D

E601 Decision to refuse application
PE0601 Decision on rejection of patent

Patent event date: 20081120

Comment text: Decision to Refuse Application

Patent event code: PE06012S01D

Patent event date: 20080529

Comment text: Notification of reason for refusal

Patent event code: PE06011S01I

AMND Amendment
J201 Request for trial against refusal decision
PJ0201 Trial against decision of rejection

Patent event date: 20081222

Comment text: Request for Trial against Decision on Refusal

Patent event code: PJ02012R01D

Patent event date: 20081120

Comment text: Decision to Refuse Application

Patent event code: PJ02011S01I

Appeal kind category: Appeal against decision to decline refusal

Decision date: 20090806

Appeal identifier: 2008101013538

Request date: 20081222

PB0901 Examination by re-examination before a trial

Comment text: Amendment to Specification, etc.

Patent event date: 20081222

Patent event code: PB09011R02I

Comment text: Request for Trial against Decision on Refusal

Patent event date: 20081222

Patent event code: PB09011R01I

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20090210

Patent event code: PE09021S01D

N231 Notification of change of applicant
PN2301 Change of applicant

Patent event date: 20090413

Comment text: Notification of Change of Applicant

Patent event code: PN23011R01D

B701 Decision to grant
PB0701 Decision of registration after re-examination before a trial

Patent event date: 20090806

Comment text: Decision to Grant Registration

Patent event code: PB07012S01D

Patent event date: 20090123

Comment text: Transfer of Trial File for Re-examination before a Trial

Patent event code: PB07011S01I

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20090925

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20090928

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
FPAY Annual fee payment

Payment date: 20120830

Year of fee payment: 4

PR1001 Payment of annual fee

Payment date: 20120830

Start annual number: 4

End annual number: 4

FPAY Annual fee payment

Payment date: 20130829

Year of fee payment: 5

PR1001 Payment of annual fee

Payment date: 20130829

Start annual number: 5

End annual number: 5

FPAY Annual fee payment

Payment date: 20140828

Year of fee payment: 6

PR1001 Payment of annual fee

Payment date: 20140828

Start annual number: 6

End annual number: 6

FPAY Annual fee payment

Payment date: 20150828

Year of fee payment: 7

PR1001 Payment of annual fee

Payment date: 20150828

Start annual number: 7

End annual number: 7

FPAY Annual fee payment

Payment date: 20160830

Year of fee payment: 8

PR1001 Payment of annual fee

Payment date: 20160830

Start annual number: 8

End annual number: 8

LAPS Lapse due to unpaid annual fee
PC1903 Unpaid annual fee

Termination category: Default of registration fee

Termination date: 20180706