KR102245745B1 - 이미지 블러링 방법 및 장치 - Google Patents

이미지 블러링 방법 및 장치 Download PDF

Info

Publication number
KR102245745B1
KR102245745B1 KR1020140170788A KR20140170788A KR102245745B1 KR 102245745 B1 KR102245745 B1 KR 102245745B1 KR 1020140170788 A KR1020140170788 A KR 1020140170788A KR 20140170788 A KR20140170788 A KR 20140170788A KR 102245745 B1 KR102245745 B1 KR 102245745B1
Authority
KR
South Korea
Prior art keywords
image
blur
pixel
sum
summed
Prior art date
Application number
KR1020140170788A
Other languages
English (en)
Other versions
KR20160066425A (ko
Inventor
윤의선
예지수
정서경
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020140170788A priority Critical patent/KR102245745B1/ko
Priority to US14/957,153 priority patent/US9704271B2/en
Priority to EP15866247.8A priority patent/EP3227856B1/en
Priority to PCT/KR2015/013068 priority patent/WO2016089114A1/en
Publication of KR20160066425A publication Critical patent/KR20160066425A/ko
Application granted granted Critical
Publication of KR102245745B1 publication Critical patent/KR102245745B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/20—Image enhancement or restoration using local operators
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/70—Denoising; Smoothing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 이미지를 흐려보이게 하는 효과 즉, 블러링(blurring)에 관한 것으로 블러 이미지의 픽셀 값을 결정하는 데 있어, 대상 픽셀로부터 멀어질수록 가중치를 더 작게 계산함으로써 블러 품질을 개선하기 위한 방법 및 장치에 관한 것이다. 본 발명에 따르면, 대상 이미지의 픽셀 별로 블러 레벨을 다르게 적용할 수 있고, 블러 이미지를 생성하기 위해 필요한 비트 수를 미리 결정하여 메모리 효율을 높일 수 있다.

Description

이미지 블러링 방법 및 장치{METHOD AND APPARATUS FOR BLURRING AN IMAGE}
본 발명은 이미지를 흐려 보이게 하는 효과(이하, 블러링(blurring)이라 한다)에 관한 것이다. 보다 구체적으로, 본 발명은 주어진 이미지에 대하여 다양한 레벨의 블러링 효과를 처리하기 위한 방법 및 장치에 관한 것이다.
최근 활발하게 보급되고 있는 스마트폰 또는 태블릿은 대부분 카메라 모듈을 포함하고 있다. 또한, 사용자가 카메라 모듈로 촬영한 이미지 또는 영상에 다양한 효과를 부여하는 편집 어플리케이션 또는 프로그램 또한 활발하게 보급되고 있다.
한편, 다양한 효과 중 이미지 블러링(blurring)은 특정 이미지 부분의 화질(definition)을 의도적으로 열화시켜, 사용자로 하여금 흐리게 인식될 수 있도록 하는 효과이다. 종래에 블러링은 평균(mean) 필터 또는 가우시안(Gaussian) 필터 중 어느 하나를 적용하여 처리될 수 있다. 이 때, 하나의 이미지에 포함된 복수 개의 픽셀(pixel)에 대하여 필터를 적용하기 때문에 이미지가 포함하는 픽셀의 수가 증가할수록 블러링을 위한 연산량이 급격하게 증가할 수 있다. 종래 기술의 블러링은 주변 N-by-N 픽셀 데이터에 동일한 가중치를 두어 그 평균으로 이미지 픽셀의 값을 결정하는 것을 빠르게 연산하는 방법이다. 구체적으로, 블러링을 빠르게 구현하기 위하여, 미리 합산이미지(Sum-image)를 생성하고, 생성된 합산이미지를 이용하여 블러링을 빠르게 연산한다. 그런데, 종래 기술은 주변 N-by-N 픽셀 데이터에 대하여 동일한 가중치를 두어 연산하기 때문에 N의 크기가 커질 수록 블러링 처리된 이미지에 네모난 박스(Box) 형태로 구분되는 지점이 뚜렷해지는 현상이 발생할 수 있다. 또한 블러링 효과라기 보다는 원본 이미지가 겹쳐 보이는 것처럼 변질되는 현상이 발생할 수 있다.
본 발명은 상기와 같은 문제를 해결하기 위해 안출된 것으로, 이미지 블러링 방법 및 장치를 제공한다.
상기와 같은 목적을 달성하기 위한 본 발명의 이미지 블러링(blurring) 처리 방법은, 상기 블러 이미지를 생성하기 위한 원본 이미지 및 블러 관련 정보를 획득하는 단계, 상기 원본 이미지를 기초로 각각의 픽셀에 대한 대각 합산 이미지를 생성하는 단계 및 상기 블러 관련 정보에 따라 생성된 상기 대각 합산 이미지로부터 블러 이미지를 생성하는 단계를 포함한다.
또한 본 발명의 일 실시 예에 따른 이미지 블러링(blurring)을 처리하는 단말은, 블러 이미지를 생성하기 위한 원본 이미지 및 블러 관련 정보를 입력 받는 입력부, 상기 원본 이미지를 기초로 각각의 픽셀에 대한 대각 합산 이미지를 생성하고, 상기 블러 관련 정보에 따라 생성된 상기 대각 합산 이미지로부터 블러 이미지를 생성하는 제어부 및 생성된 블러 이미지를 표시하는 출력부를 포함한다.
본 발명의 다양한 실시 예에 따르면, 블러 이미지의 픽셀 값을 결정하는 데 있어, 대상 픽셀로부터 멀어질수록 가중치를 더 작게 계산함으로써 블러 품질을 개선할 수 있다.
또한 본 발명의 다양한 실시 예에 따르면, 대상 이미지의 픽셀 별로 블러 레벨을 다르게 적용할 수 있다.
또한 본 발명의 다양한 실시 예에 따르면, 블러 레벨에 무관하게 4회의 연산으로 블러 이미지를 생성할 수 있다.
또한 본 발명의 다양한 실시 예에 따르면, 블러 이미지를 생성하기 위해 필요한 비트 수를 미리 결정하여 메모리 효율을 높일 수 있다.
도 1은 합산이미지(Sum-image)를 이용하여 블러링을 처리하는 방법을 나타낸 도면이다.
도 2는 합산이미지(sum-image)를 이용하여 블러링을 처리하는 방법으로 획득된 출력 이미지 및 원본 이미지를 나타낸 것이다.
도 3은 본 발명에 따른 이미지 블러링 방법에서 사용하는 주변 픽셀 가중치 모델을 나타낸 것이다.
도 4는 본 발명의 일 실시 예에 따른 블러링 방법을 수행하는 장치의 구성을 나타내는 블록도이다.
도 5는 본 발명의 합산이미지 생성부(411)에서 합산이미지를 생성하는 동작을 설명하기 위한 도면이다.
도 6은 본 발명의 대각 합산이미지 생성부(412)에서 대각 합산이미지를 생성하는 동작을 설명하기 위한 도면이다.
도 7은 본 발명에 따른 블러 이미지 생성부(414)의 동작을 설명하기 위한 도면이다.
도 8은 본 발명의 일 실시 예에 따른 블러링 처리 장치의 동작을 나타낸 순서도이다.
도 9a는 터치 패널에 입력되는 터치 압력에 따라 블러 레벨 또는 블러 필터의 크기를 입력하는 것을 나타낸 도면이다.
도 9b는 터치 패널에 드래그(drag)입력에 따라 블러 레벨 또는 블러 필터의 크기를 입력하는 것을 나타낸 도면이다.
도 10은 블러 이미지를 생성하기 위한 연산을 수행하는 데 필요한 최소 비트를 설명하기 위한 도면이다.
도 11은 블러 레벨에 따른 합산이미지를 이용한 블러링의 연산 횟수를 나타낸 그래프이다.
도 12는 합산이미지를 이용한 블러 이미지와 대각 합산이미지를 이용한 블러 이미지를 나타낸 것이다.
이하, 본 발명의 실시 예를 첨부된 도면을 참조하여 상세하게 설명한다.
실시 예를 설명함에 있어서 본 발명이 속하는 기술 분야에 익히 알려져 있고 본 발명과 직접적으로 관련이 없는 기술 내용에 대해서는 설명을 생략한다. 이는 불필요한 설명을 생략함으로써 본 발명의 요지를 흐리지 않고 더욱 명확히 전달하기 위함이다.
마찬가지 이유로 첨부 도면에 있어서 일부 구성요소는 과장되거나 생략되거나 개략적으로 도시되었다. 또한, 각 구성요소의 크기는 실제 크기를 전적으로 반영하는 것이 아니다. 각 도면에서 동일한 또는 대응하는 구성요소에는 동일한 참조 번호를 부여하였다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
이때, 처리 흐름도 도면들의 각 블록과 흐름도 도면들의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수 있음을 이해할 수 있을 것이다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 흐름도 블록(들)에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 흐름도 블록(들)에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 흐름도 블록(들)에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.
또한, 각 블록은 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실행 예들에서는 블록들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.
이 때, 본 실시 예에서 사용되는 '~부'라는 용어는 소프트웨어 또는 FPGA또는 ASIC과 같은 하드웨어 구성요소를 의미하며, '~부'는 어떤 역할들을 수행한다. 그렇지만 '~부'는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. '~부'는 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 '~부'는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들, 및 변수들을 포함한다. 구성요소들과 '~부'들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 '~부'들로 결합되거나 추가적인 구성요소들과 '~부'들로 더 분리될 수 있다. 뿐만 아니라, 구성요소들 및 '~부'들은 디바이스 또는 보안 멀티미디어카드 내의 하나 또는 그 이상의 CPU들을 재생시키도록 구현될 수도 있다.
본 명세서에서 블러링 효과를 적용하기 위한 이미지는 원본 이미지, 입력 이미지, input 이미지 또는 대상 이미지로 명명될 수 있다.
또한 본 명세서에서, 블러링 효과가 적용된 이미지는 출력 이미지, 블러(blur) 이미지, 또는 블러링(blurring) 이미지로 명명될 수 있다.
또한 본 명세서에서 '~ 이미지'는 해당 이미지의 픽셀 값들의 집합을 나타낼 수 있다.
또한 본 명세서에서 단말은 CPU와 같은 연산부를 갖춘 모든 전자 장치를 의미할 수 있다. 예를 들어, 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 또는 스마트 와치(smart watch))중 적어도 하나를 포함할 수 있다. 또한 단말은 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSync ™, 애플TV™, 또는 구글 TV™), 게임 콘솔(game consoles), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다. 단말은 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치 및 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛, 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller’s machine) 또는 상점의 POS(point of sales) 중 적어도 하나를 포함할 수 있다.
이하, 본 발명의 실시 예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 합산이미지(Sum-image)를 이용하여 블러링을 처리하는 방법을 나타낸 도면이다.
도 1에 따르면, 블러 이미지는 합산이미지(Sum-image)를 생성하고, 생성된 합산이미지에 평균필터(mean-filter)를 적용하여 처리될 수 있다. 구체적으로, 합산이미지는 대상 이미지의 각 픽셀의 색상을 나타내는 수치(이하, 픽셀 값이라 한다)를 누진적으로 합산하여 특정 픽셀 값을 결정하는 이미지일 수 있다. 예를 들어, m × n 사이즈의 대상 이미지에서, (i,j)의 픽셀 값은 (1,1)의 픽셀 값, (1,2)의 픽셀 값, (1,3)의 픽셀 값, …, (1,j)의 픽셀 값, (2,1)의 픽셀 값, (2,2)의 픽셀 값, (2,3)의 픽셀 값, …, (2,j)의 픽셀 값, …, (i,1)의 픽셀 값, (i,2)의 픽셀 값, …, (i,j-1), (i,j)의 픽셀 값의 합계로 결정될 수 있다. 이를 수학식으로 표현하면 다음의 [수학식 1] 과 같다.
Figure 112014117378860-pat00001
블러링은 상기 [수학식 1]에 따라 합산이미지를 생성한 뒤, 블러링을 하고자 하는 영역(region of interest)에 대해 평균필터(mean-filter)를 적용하여 처리될 수 있다. 구체적으로 도 1의 대상영역(100)에 대한 블러링은 대상영역(100)에 대한 합산이미지상의 픽셀 값의 합을 대상영역(100)의 가중치와 관련된 값으로 나누는 방식으로 획득할 수 있다. 대상영역의 합산 픽셀 값은 d-b-c+a로 구할 수 있다. 계산된 합산 픽셀 값을 가중치와 관련된 변수인 (1+2p)2으로 나누어 블러링 처리한 출력 픽셀 값을 구할 수 있다. 이를 수식으로 나타내면 다음의 [수학식 2]와 같다.
Figure 112014117378860-pat00002
도 2는 합산이미지(sum-image)를 이용하여 블러링을 처리하는 방법으로 획득된 출력 이미지 및 원본 이미지를 나타낸 것이다.
도 2에 따르면, 상술한 [수학식1] 및 [수학식 2]를 기초로 획득한 블러 이미지는 박스 형태의 아티팩트(artifacts)가 발생하는 것을 알 수 있다. 이는 대상 영역의 픽셀 값을 계산함에 있어, 가중치를 모두 동일하게 계산하기 때문이다. 따라서, 필터 사이즈에 따라 박스 형태의 경계선이 보일 수 있다. 또한 이를 확대하면, 블러 이미지가 아닌 원본 이미지가 여러 장 겹쳐 보이는 현상이 발생 할 수 있다.
도 3은 본 발명에 따른 이미지 블러링 방법에서 사용하는 주변 픽셀 가중치 모델을 나타낸 것이다.
도 3에 따르면, 상술한 합산이미지와 평균필터를 사용한 블러링 방식은 주변 픽셀의 가중치를 동일하게 두고 블러 이미지 생성을 위한 픽셀 값을 연산하지만, 본 발명에 따른 블러링 방법은 중심픽셀로 갈수록 가중치를 높게 설정하고, 주변부로 갈수록 가중치를 점점 낮추는 가중치 모델을 사용한다. 따라서, 도 2에서와 같은 아티팩트의 발생이나 대상 이미지가 커질수록 발생하는 블러링 품질의 열화를 방지할 수 있다.
도 4는 본 발명의 일 실시 예에 따른 블러링 방법을 수행하는 장치의 구성을 나타내는 블록도이다.
도 4에 따르면, 본 발명에 따른 블러링 방법을 수행하는 장치(이하, 블러링 장치라 한다) 블러링 장치는 입력부(400), 제어부(410) 및 출력부(420)를 포함할 수 있다. 또한 도면에는 미도시 되었으나, 저장부를 추가적으로 더 구비할 수도 있다. 블러링 장치는 연산부 또는 CPU를 구비한 스마트폰 또는 태블릿 PC로 구현될 수 있으며, 이들에 한정되는 것은 아니다. 또한 제어부(410)는 대각 합산이미지 생성부(411), 블러 정보 결정부(412) 및 블러 이미지 생성부(413)를 포함할 수 있다. 도 4에서는 제어부(410)의 구성요소로 상기 대각 합산이미지 생성부(411), 블러 정보 결정부(412) 및 블러 이미지 생성부(413)를 포함할 수 있는 것으로 도시 되었으나, 하나의 제어부(410)가 상기 구성요소들의 동작을 모두 수행할 수 있음을 명시한다.
입력부(400)는 본 발명에 따른 블러링을 하기 위한 이미지를 입력 받을 수 있다. 다양한 실시 예에서, 입력부(400)는 스마트 폰이나 태블릿 PC의 카메라 모듈 또는 입력된 이미지파일 그 자체 일 수 있다. 또한 입력부(400)는 터치 패널일 수 있고, 출력부(420)와 결합하여 터치 스크린의 형태로 구현될 수 있다. 이 경우, 터치 패널은 사용자의 터치 입력을 감지하고, 터치 신호를 발생시켜 제어부(410)로 전송할 수 있다. 본 발명에서 터치 신호는 위치 정보(X축, Y축)와 압력정보(Z축)를 포함할 수 있다. 따라서 제어부(410)는 터치 입력이 발생하면, 터치 위치뿐만 아니라 터치 압력에 대한 정보도 획득할 수 있다.
입력부(400)는 대상 이미지를 입력 받아 제어부(410)로 전달할 수 있다. 보다 상세히는 제어부(410) 내의 대각 합산이미지 생성부(411)로 입력된 대상 이미지를 전달할 수 있다. 또한 입력부(400)는 블러 이미지 생성에 사용되는 블러 관련 정보를 입력 받을 수 있다.
블러 관련 정보는 사용자의 입력에 따라 블러링 처리를 하는 정도 즉 블러 레벨 또는 블러 필터의 크기, 종류 또는 블러링을 할 영역에 대한 정보 중 어느 하나 이상일 수 있다. 다양한 실시 예에서 블러 레벨은 각각의 블러링 처리 장치의 성능에 따라 미리 임의의 블러 레벨이 설정되어 있을 수 있다. 또는 사용자의 입력에 따라 임의의 블러 레벨을 입력 받을 수도 있다. 또는 전술한 바와 같이, 대상 이미지의 일부분에 대해서만 블러링을 할 수도 있고, 또는 각각의 픽셀 별로 블러 레벨을 달리 입력 받을 수도 있다.
본 발명의 다양한 실시 예에서, 블러링 장치는 터치 스크린을 통해 블러 관련 정보를 입력 받을 수 있다. 터치 스크린을 이용하여 블러 관련 정보를 입력하는 방법에 대해서는 도 9에 대한 설명에서 보다 상세하게 설명한다.
대각 합산이미지 생성부(411)는 입력부(400)로부터 입력된 대상 이미지의 각 픽셀 값을 기초로 합산이미지를 생성하고, 생성한 합산이미지를 이용하여 두 개의 대각 합산이미지(diagonal image)를 생성할 수 있다. 다양한 실시 예에서, 합산이미지와 대각 합산이미지는 각 단계별로 생성되거나 저장될 수 있고, 하나의 단계로 대각 합산이미지를 연산할 수도 있다.
합산이미지는 대상 이미지의 각각의 픽셀 값을 누진적으로 합산한 합산 픽셀 값들로 이루어질 수 있다. 본 발명에 따르면, 합산이미지를 이용하여 대각 합산이미지를 생성함으로써, 블러 이미지의 픽셀 값을 연산함에 있어, 중심부의 가중치를 주변부의 가중치보다 더 높게 계산하는 것이 가능하다. 대각 합산이미지 생성부(411)가 대각 합산이미지를 생성하는 방법은 후술하는 도 5, 6 및 도 8에 대한 설명에서 보다 상세하게 설명한다.
블러 정보 결정부(413)는 입력부(400)에 입력된 정보에 따라 블러 레벨 즉, 블러링 필터의 크기를 선택할 수 있다. 블러 레벨이 커질수록 더욱 흐려보이는 효과가 크고, 블러 레벨이 작아질수록 원본이미지에 가까워질 수 있다. 또한 본 발명에 따르면, 대상 이미지 전체 또는 임의의 영역에 동일한 블러 레벨을 적용할 수도 있고, 각 픽셀 별로 블러 레벨이 다른 이미지를 생성할 수도 있다. 이 경우, 블러 정보 결정부(413)는 사용자의 입력에 따라서 미리 정의되거나 또는 사용자의 입력에 따라 변화하는 블러 레벨 맵 이미지를 생성하여 저장하고 있다가 각 픽셀 별로 상이한 블러 레벨이 결정되면, 상기 저장된 블러 레벨 맵 이미지를 기초로 다양한 블러 레벨이 동시에 적용되어 있는 블러 이미지를 생성할 수 있도록 블러 이미지 생성부(414)에 지시할 수 있다.
블러이미지 생성부(414)는 대각 합산이미지 생성부(411)에서 생성한 대각 합산이미지 및 블러 정보 결정부(412)에서 결정된 블러 레벨에 따라 블러 이미지를 생성할 수 있다. 이 경우 대상 이미지 또는 대상 영역의 블러 레벨이 동일한 블러 이미지를 생성할 수도 있고, 각 픽셀 별로 블러 레벨이 상이한 이미지를 생성할 수도 있다. 블러 이미지 생성부(413)가 상기 대각 합산이미지 생성부(411)에서 생성한 대각 합산이미지를 이용하여 블러 이미지를 생성하는 방법에 대해서는 후술한 도 7에 대한 설명에서 보다 상세하게 설명한다.
출력부(420)는 블러 이미지를 표시하거나 다른 장치로 출력할 수 있다. 다양한 실시 예에서 출력부(420)는 디스플레이 수단으로 구현될 수 있다. 또한 출력부(420)는 전술한 입력부(400)와 결합하여 터치 스크린의 형태로 구현될 수도 있다.
도 5 및 도 6은 본 발명의 대각 합산이미지 생성부(411)가 대각 합산이미지를 생성하는 동작을 설명하기 위한 도면이다.
구체적으로 대각 합산이미지 생성부(411)는 도 5에 따라 대상이미지로부터 합산이미지를 생성하고, 생성된 합산이미지를 이용하여 도 6에 따라 대각 합산이미지를 생성할 수 있다. 또한 본 명세서에서는 설명의 편의 상 합산이미지 및 대각 합산이미지를 생성하는 방법을 구분하여 설명하고 있으나, 하나의 단계로 대상이미지로부터 대각 합산이미지를 바로 생성할 수도 있다. 하나의 단계로 대상이미지로부터 대각 합산이미지를 생성하는 과정은 도 8에 대한 설명에서 후술한다.
도 5는 본 발명의 대각 합산이미지 생성부(411)에서 합산이미지를 생성하는 동작을 설명하기 위한 도면이다.
대각 합산이미지 생성부(411)는 전술한 [수학식 1]을 이용하여 합산이미지를 생성할 수 있다. 구체적으로, 합산이미지는 대상 이미지의 각 픽셀 값을 특정 기준 픽셀을 기준으로 누진적으로 합산한 각 합산 픽셀 값의 집합일 수 있다. 구체적으로 도 5에서와 같이 대상 이미지의 기준이 되는 기준 픽셀을 기준으로 합산 이미지가 생성될 수 있으며, 본 발명을 적용함에 있어서, 어느 하나의 기준으로 한정되는 것은 아니다. 임의의 좌표지점 (i, j)의 합산 픽셀 값은 기준이 되는 기준 픽셀에서 해당 픽셀에 이르는 영역에 포함된 픽셀 값의 합일 수 있다. 다양한 실시 예에서, 상기 기준 픽셀은 대상 이미지의 네 꼭지점 중 어느 한 픽셀일 수 있다. 한편, 합산 이미지 생성부(411)에서 생성된 합산이미지는 그 자체로 도 1에 대한 설명과 같이 블러링에 사용될 수도 있고, 생성된 합산이미지를 이용하여 대각 합산이미지를 생성하는데 이용될 수도 있다.
도 6은 본 발명의 대각 합산이미지 생성부(411)에서 대각 합산이미지를 생성하는 동작을 설명하기 위한 도면이다.
도 6에 따르면, 대각 합산이미지 생성부(412)는 생성된 합산이미지를 이용하여 대각 합산이미지를 생성할 수 있다. 구체적으로 대각 합산이미지는 기준 픽셀에서 해당 픽셀에 이르는 대각방향의 경로에 위치한 픽셀 값들의 합인 대각 합산 픽셀 값들의 집합일 수 있다. 즉, 임의의 픽셀에서의 대각 합산 픽셀 값은 합산 이미지 상의 임의의 한 픽셀을 기준으로 네 가지 대각 방향 중 어느 한 방향의 경로 상에 있는 합산 픽셀 값을 누적적으로 합한 값일 수 있다. 또한 대각 합산이미지는 서로 다른 대각 방향으로 누적적으로 픽셀 값을 합하여 생성한 두 개의 대각 합산이미지의 셋트(set)로 이루어 질 수 있다. 따라서, 도 6에서와 같이 네 가지 셋트의 대각 합산이미지가 생성될 수 있으며, 본 발명의 실시 예에 따른 블러링은 이들 네 유형 중 어느 하나를 이용한 방법에 제한되는 것은 아니다.
본 발명의 블러링 장치는 도 5에서 설명한 합산이미지를 생성하지 않고, 사용자의 입력에 따른 블러 관련 정보에 따라, 대상이미지로부터 대가 합산 이미지를 한 번에 생성할 수도 있다. 즉, 합산이미지를 생성하고, 생성된 합산이미지를 기초로 대각 합산이미지를 생성하는 것은 반드시 두 단계에 걸쳐 수행되어야만 하는 것은 아니다. 구체적으로, 대상이미지의 픽셀 값으로부터 대각 합산이미지 즉 대각 합산 픽셀 값을 바로 생성할 수 있다. 이를 나타낸 것은 다음의 [수학식 3]과 같다.
Figure 112014117378860-pat00003
상기 [수학식 3]에 따르면, 대상이미지의 픽셀 값으로부터 대각 합산 픽셀 값을 바로 연산 할 수 있다. 연산결과 D1 및 D2의 두 개의 대각 합산이미지가 생성됨을 알 수 있다. [수학식 3]에 의해 생성된 대각 합산이미지는 도 6에 나타난 네 가지 대각 합산 이미지 셋트(set) 중 어느 한 셋트 일 수 있다. [수학식 3]에 의해 대각 합산이미지를 생성하는 경우 합산이미지를 생성하는 단계를 거치지 않고, 대상이미지 및 블러 관련 정보만을 입력 받고, 대상이미지로부터 바로 대각 합산이미지를 생성하여 이를 이용한 블러 이미지를 바로 생성할 수 있다.
도 7은 본 발명에 따른 블러 이미지 생성부(414)의 동작을 설명하기 위한 도면이다.
블러 이미지를 생성하는 기본적인 원리는 도 1에서 설명한 것과 같다. 즉, 임의의 영역에 대한 블러링은 해당 영역의 대각 합산 픽셀 값의 합을 구하고 이를 가중치와 관련된 변수로 나누는 방법에 의해 수행될 수 있다.
구체적으로, 대상영역(700)에 대한 블러 이미지를 생성하는 방법은 다음의 [수학식 4]에 의해 달성될 수 있다.
Figure 112014117378860-pat00004
상기 [수학식 4]에서, D1 및 D2는 도 6에서의 네 가지 대각 합산이미지 유형 중 어느 한 유형에 의해 생성된 두 대각 합산이미지일 수 있다. 또한 앞서 설명한 바와 같이, 대각 합산이미지는 합산이미지를 생성하고 생성된 합산이미지를 이용하여 생성할 수도 있으나, [수학식 3]에 의해 대상이미지로부터 바로 계산될 수도 있다. [수학식 4]에서, r은 대상영역(700)의 중심 픽셀에서부터 대상 영역의 외곽 픽셀까지의 직선 픽셀 값을 나타낸다. 즉, r값은 블러 레벨일 수 있고, 블러 필터의 크기로 명명될 수도 있다. 구체적으로, D1 대각합산이미지의 B픽셀의 대각 합산 픽셀 값에서 A픽셀의 대각 합산 픽셀 값을 뺀 차와, D2 대각합산이미지의 C픽셀의 대각 합산 픽셀 값에서 D픽셀의 대각 합산 픽셀 값을 뺀 값의 차를 구한 뒤, 가중치의 합인 로 나누는 연산을 통해 블러 이미지를 생성할 수 있다. 또한, [수학식 4]에 의한 블러 이미지는 각각의 픽셀 단위로 계산이 이루어 지므로, 하나의 대상 이미지에 r값을 달리 설정하여 서로 다른 레벨의 블러링 효과가 공존하도록 할 수 있다.
도 8은 본 발명의 일 실시 예에 따른 블러링 처리 장치의 동작을 나타낸 순서도이다.
도 8에 따르면, 블러링 장치는 블러 이미지를 생성하기 위한 원본 이미지인 대상 이미지 및 블러 관련 정보를 획득할 수 있다(801). 대상 이미지는 블러링 장치에 별도로 구비된 카메라 모듈을 이용하여 획득된 이미지이거나, 사용자의 입력에 따라 제공된 이미지일 수 있다. 또한 블러 관련 정보는 사용자의 입력에 따라 블러링 처리를 하는 정도 즉 블러 레벨 또는 블러 필터의 크기, 종류 또는 블러링을 할 영역에 대한 정보 중 어느 하나 이상일 수 있다. 다양한 실시 예에서 블러 레벨은 각각의 블러링 처리 장치의 성능에 따라 미리 임의의 블러 레벨이 설정되어 있을 수 있다. 또는 사용자의 입력에 따라 임의의 블러 레벨을 입력 받을 수도 있다. 또는 전술한 바와 같이, 대상 이미지의 일부분에 대해서만 블러링을 할 수도 있고, 또는 각각의 픽셀 별로 블러 레벨을 달리 입력 받을 수도 있다.
또한, 블러 관련 정보는 블러링 장치의 입력부를 통해 입력될 수 있다. 다양한 실시 예에서, 입력부는 스마트 폰이나 태블릿 PC의 카메라 모듈 또는 입력된 이미지파일 그 자체 일 수 있다. 또한 입력부는 터치 패널일 수 있고, 출력부와 결합하여 터치 스크린의 형태로 구현될 수 있다. 이 경우, 터치 패널은 사용자의 터치 입력을 감지하고, 터치 신호를 발생시켜 발생한 터치 신호에 따른 블러 관련 정보를 인식할 수 있다. 본 발명에서 터치 신호는 위치 정보(X축, Y축)와 압력정보(Z축)를 포함할 수 있다.
803단계에서 블러링 장치는 입력 받은 대상 이미지를 기초로 대각 합산이미지를 생성할 수 있다. 대각 합산이미지는 대상이미지를 기초로 합산이미지를 생성하고, 생성된 합산이미지를 이용하여 생성될 수 있다. 또는 앞서 설명한 [수학식 3]에 따라 대상이미지로부터 바로 대각 합산이미지를 생성할 수도 있다.
합산이미지는 대상 이미지의 각각의 픽셀 값을 누진적으로 합산한 합산 픽셀 값들로 이루어질 수 있다. 합산이미지는 전술한 [수학식 1]을 이용하여 생성될 수 있다. 구체적으로, 합산이미지는 대상 이미지의 각 픽셀 값을 특정 기준 픽셀을 기준으로 누진적으로 합산한 각 합산 픽셀 값의 집합일 수 있다. 합산이미지는 대상 이미지의 기준이 되는 기준 픽셀을 기준으로 생성될 수 있으며, 기준 픽셀은 대상 이미지의 네 꼭지점 중 어느 한 픽셀일 수 있다. 합산이미지의 픽셀 값인 합산 픽셀 값은 기준 픽셀에서 해당 픽셀에 이르는 사각형 영역에 포함된 픽셀 값의 합일 수 있다. 다양한 실시 예에서, 상기 기준 픽셀은 대상 이미지의 네 꼭지점 중 어느 한 픽셀일 수 있다. 블러링 장치는 생성된 합산이미지를 이용하여 대각 합산이미지를 생성할 수 있다. 구체적으로 대각 합산이미지는 기준 픽셀에서 해당 픽셀에 이르는 대각방향의 경로에 위치한 픽셀 값들의 합인 대각 합산 픽셀 값들의 집합일 수 있다. 즉, 임의의 픽셀에서의 대각 합산 픽셀 값은 합산 이미지 상의 임의의 한 픽셀을 기준으로 네 가지 대각 방향 중 어느 한 방향의 경로 상에 있는 합산 픽셀 값을 누적적으로 합한 값일 수 있다. 또한 대각 합산 이미지는 서로 다른 대각 방향으로 누적적으로 픽셀 값을 합하여 생성한 두 개의 대각 합산이미지의 셋트(set)로 이루어 질 수 있다. 합산이미지의 생성 없이 대상이미지로부터 바로 대각 합산이미지를 생성하는 것은 앞서 설명한 [수학식 3]에 의해 달성될 수 있다.
블러링 장치는 801단계에서 획득된 블러 관련 정보에 따라 803 단계에서 생성된 대각 합산이미지를 이용하여 블러 이미지를 생성할 수 있다(805). 구체적으로, 블러 레벨에 따라 블러 이미지의 픽셀 값을 계산할 수 있으며 이는 도 7에 대한 설명에서와 같이 [수학식 4]에 의해 계산될 수 있다. 즉, 블러 레벨이 결정되면, 생성된 대각 합산 이미지 셋트를 이용하여 상기 블러 레벨에 따른 블러 필터 내 대각 합산 픽셀 값의 합을 구한 뒤, 이를 가중치의 합으로 나누어 블러 이미지의 픽셀 값을 결정할 수 있다.
도 4 내지 도 8에 대한 설명에 상세하게 기술된 본 발명에 따르면, 대상 픽셀의 주변 픽셀에 대한 가중치를 동일하게 설정하지 않고, 주변부로 갈수록 보다 낮은 가중치를 설정하여 연산함으로써, 블러 이미지의 품질이 열화 되지 않을 수 있도록 한다. 또한 본 발명에 따르면, 사용자의 입력에 따라서 미리 정의되거나 또는 사용자의 입력에 따라 변화하는 블러 레벨 맵 이미지를 생성하여 저장하고 있다가 각 픽셀 별로 상이한 블러 레벨이 결정되면, 상기 저장된 블러 레벨 맵 이미지를 기초로 다양한 블러 레벨이 동시에 적용되어 있는 블러 이미지를 생성할 수 있다.
도 9는 본 발명의 터치 스크린을 이용하여 블러 관련 정보를 입력하는 것을 설명하기 위한 개념도이다.
도 9a는 터치 패널에 입력되는 터치 압력에 따라 블러 레벨 또는 블러 필터의 크기를 입력하는 것을 나타낸 도면이다.
도 9a에 따르면, 본 발명의 블러링 장치의 입력부는 터치 패널로 구현될 수 있다. 이 경우 사용자는 대상이미지(900)에 대해서 일부 또는 대상이미지 전체에 대한 블러 영역(901)을 입력하고, 블러 레벨 또는 블러 필터의 크기를 입력하기 위해서 터치 패널 상의 제 1 지점(902)을 일정 크기의 압력 이상으로 터치할 수 있다. 블러링 장치의 입력부는 사용자의 터치 입력에 대한 압력에 따라 블러 레벨 또는 블러 필터의 크기에 대한 입력을 인식할 수 있다. 구체적으로 블러링 장치는 사용자의 터치 입력의 압력이 임계 압력 이상을 감지하면, 그에 대응되는 블러 레벨 또는 블러 필터의 크기가 입력된 것으로 인식할 수 있다. 다양한 실시 예에서 입력부는 터치스크린 상의 사용자에게 블러 레벨 또는 블러 필터의 크기에 대한 입력 영역을 지시하는 입력 지시자(903)를 포함할 수 있다.
도 9b는 터치 패널에 드래그(drag)입력에 따라 블러 레벨 또는 블러 필터의 크기를 입력하는 것을 나타낸 도면이다.
도 9b에 따르면, 블러링 장치는 대상이미지(900)의 일부 또는 전부에 해당하는 블러 영역(904)에 대한 정보를 입력받고 이에 대한 블러 레벨 또는 블러 필터의 크기에 대한 입력을 터치 패널 상의 드래그(drag)입력에 따라 인식할 수 있다.
다양한 실시 예에서 블러링 장치는 터치스크린 상의 화면의 드래그 입력 거리에 따라 블러 레벨 또는 블러 필터의 크기에 대한 입력을 인식할 수 있다. 구체적으로 임의의 거리에 해당하는 드래그 입력이 인식되면 해당 거리에 대응하는 블러 레벨 또는 블러 필터의 크기가 입력된 것으로 인식할 수 있다. 이 경우 드래그 입력의 어느 한 방향에 대한 입력을 블러 레벨 또는 블러 필터의 크기가 증가하는 입력으로 인식하고, 반대 방향으로의 드래그 입력은 블러 레벨 또는 블러 필터의 크기가 감소하는 입력으로 인식할 수도 있다. 또한, 터치 스크린 상에 블러 레벨 또는 블러 필터의 크기에 대한 드래그 입력 방향을 지시하는 드래그 입력 지시자(905)를 포함할 수 있다. 사용자가 상기 도 9a 및 9b에 따라 블러 관련 정보를 입력하면, 블러링 장치는 실시간으로 블러 이미지를 제공할 수 있다.
이상에서 본 발명에 따른 블러링 방법 및 블러링 장치의 동작을 설명하였다. 이하에서는, 전술한 블러링 방법을 적용함에 있어, 블러 이미지의 생성을 위한 연산에 필요한 비트(bit)수를 결정하는 방법에 대해서 상세하게 설명한다.
본 발명에 따른 블러링을 적용함에 있어 합산 이미지를 저장할 저장부의 크기는 다음의 [표 1]에 따라 결정될 수 있다.
MAX
BLUR LEVEL		 가중치 합 W FILTER 내
픽셀 합의 최대값(16진수)		 SUM IMAGE
STORAGE SIZE　S
1 10 9F6 최소 12 BIT
2 35 22DD 최소 14 BIT
3 84 53AC 최소 15 BIT
4 165 A45B 최소 16 BIT
5 286 11CE2 최소 17 BIT
6 455 1C539 최소 17 BIT
10 1771 6E415 최소 19 BIT
37 73150 11CA042 최소 25 BIT
232 16865707 100584F57 최소 33 BIT
233 17083794 103A8E46E 최소 33 BIT
[표 1]에 따르면, 사용자가 입력부(400)에 입력한 블러 관련 정보에 포함된 블러 레벨을 기준으로 필터 내 픽셀 합의 최대값 및 가중치희 합을 예상할 수 있다. 이를 기초로 합산이미지를 생성하여 저장하기 위한 저장부의 크기를 예측하거나, 최소한의 저장부 크기를 이용하여 구현될 수 있다.
예컨대, 블러 레벨이 3인 경우 7X7 크기의 주변 픽셀을 참고하는 블러 이미지가 생성되며 이 경우 가중치의 합은 7x7 + 5x5 + 3x3 + 1x1 = 84가 된다. 픽셀 값은 255의 최대값을 가질 수 있으므로, 필터 내 픽셀 값의 최대 합은 이는 16진수로 0x53AC가 되므로 합산이미지를 위한 저장공간으로 최소 15비트의 저장공간이 필요함을 알 수 있다.
본 발명에서 대각 합산이미지는 합산이미지를 이용하여 계산되는 값이므로, 대각 합산이미지를 연산하기 위한 최소 비트 역시 합산이미지의 비트 수와 동일할 수 있다.
이러한 특징을 이용하면, 본 발명에 따른 블러 이미지를 연산하기 위한 비트수를 예상할 수 있다. 구체적으로 블러 레벨에 따른 가중치의 합 W 및 필터 내 픽셀 값의 합의 최대값이 결정되면, 이에 필요한 합산이미지의 연산 비트수가 상기 [표 1]에 의해 결정된다. 또한, 픽셀 값의 최대값은 255이므로, 필터 내 픽셀 값의 합을 가중치의 합으로 나눈 결과는 상위 9비트를 제외한 나머지 비트의 값을 무시하더라도 오차를 최소화한 블러 이미지의 연산이 가능해진다. 이를 표로 나타내면 다음의 [표 2]와 같다.
BLUR LEVEL 가중치 합 W 크기가 S인
DIAGONAL IMAGE 데이터 중 필요 하위 BIT 수 M 		SHIFT LEVEL N BLUR IMAGE
STORAGE SIZE
1 10 최소 12 BIT 최대 3 BIT 9BIT
2 35 최소 14 BIT 최대 5 BIT 9BIT
3 84 최소 15 BIT 최대 6 BIT 9BIT
4 165 최소 16 BIT 최대 7 BIT 9BIT
5 286 최소 17 BIT 최대 8 BIT 9BIT
6 455 최소 17 BIT 최대 8 BIT 9BIT
10 1771 최소 19 BIT 최대 10 BIT 9BIT
37 73150 최소 25 BIT 최대 16 BIT 9BIT
232 16865707 최소 33 BIT 최대 24 BIT 9BIT
233 17083794 최소 33 BIT 최대 24 BIT 9BIT
도 10은 블러 이미지를 생성하기 위한 연산을 수행하는 데 필요한 최소 비트를 설명하기 위한 도면이다.
도 10에 따르면, 블러링 장치에서 제공할 수 있는 최대 블러 레벨은 37임을 가정하면, 이 때 필요한 합산이미지 저장 최소 비트수는 상기 [표 1]에 의해 25비트 임을 알 수 있다. 이 때, 블러 이미지를 생성하기 위해 결정된 블러 레벨이 6인 경우 합산이미지 저장 최소 비트수는 17비트이다([표 1]). 또한 이때 필터 내 가중치의 합은 455이고, 이를 2진수로 나타내면 111000111(2)이다. 블러 이미지를 생성하기 위한 상기 [수학식 3]에서 계산 결과는 결국 블러 이미지의 픽셀 값이므로 255를 초과할 수 없다. 따라서, 상위 9비트를 제외한 나머지 비트를 버리고(shift right) 연산을 수행하더라도, 오차를 최소화 한 블러 이미지를 획득할 수 있다. [표 2]에서 SHIFT LEVEL은 블러 레벨에 따라 상위 9 비트를 제외하고 버릴 수 있는 즉 쉬프트 처리할 수 있는 최대 비트 수를 나타낸다. 여기서 쉬프트 처리하여 버릴 수 있는 최대 비트 수는 다음의 [수학식 5]를 만족하여야 한다.
Figure 112014117378860-pat00005
여기서 W는 가중치의 합을 나타내고, N은 쉬프트 할 수 있는 최대 비트 수를 나타낼 수 있다. 상술한 예에 따르면하위 8비트의 값을 쉬프트(shift) 처리하여 버린 뒤에 연산을 수행하면 되므로, 블러 이미지를 연산하는 데 필요한 비트는 9 비트가 된다. 이때 최소 필요 비트인 9비트로만 연산을 하는 경우에는 가중치 역시 하위 8비트를 쉬프트 처리하여 계산을 수행할 수 있다.
도 11은 블러 레벨에 따른 합산이미지를 이용한 블러링의 연산 횟수를 나타낸 그래프이다.
도 1에서 설명한 합산이미지를 이용한 블러링의 연산 횟수는 픽셀 당 다음과 같은 횟수의 연산이 필요하다. 블러 레벨(BLUR LEVEL)이 N이라고 할 경우, 곱하기 연산 N*N 회, 더하기 연산 N*N-1 회, 나누기 연산 1회로 구성된 연산을 픽셀마다 수행해야 한다. 연산 종류를 제외하고 필요한 연산의 횟수를 구하면 픽셀 당 2*N*N의 연산이 필요하다. 하지만 본 발명에 따른 대각 합산이미지를 이용한 블러링에 따르면, 블러 레벨(N)에 무관하게 픽셀 당 더하기(빼기) 연산 3회, 나누기 연산 1회로 총 4개의 연산으로 블러 이미지(BLUR IMAGE)를 구할 수 있다.
도 12는 합산이미지를 이용한 블러 이미지와 대각 합산이미지를 이용한 블러 이미지를 나타낸 것이다.
본 발명의 실시 예에 따른 대각 합산이미지를 이용한 블러링을 이용하면 합산이미지를 이용하여 블러링을 하는 경우 보다 블러링 품질이 개선되며 블러 이미지를 생성하기 위한 연산을 수행하는 경우에 필요한 비트 수를 구현하는 하드웨어의 성능에 따라 최적화 할 수 있다. 따라서 전체적인 메모리의 효율이 증가할 수 있다.
상술한 실시 예들에서, 모든 단계는 선택적으로 수행의 대상이 되거나 생략의 대상이 될 수 있다. 또한 각 실시 예에서 단계들은 반드시 순서대로 일어날 필요는 없으며, 뒤바뀔 수 있다. 한편, 본 명세서와 도면에 개시된 본 명세서의 실시 예들은 본 명세서의 기술 내용을 쉽게 설명하고 본 명세서의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 명세서의 범위를 한정하고자 하는 것은 아니다. 즉 본 명세서의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 명세서가 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
한편, 본 명세서와 도면에는 본 발명의 바람직한 실시 예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시 예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
400: 입력부
410: 제어부
411: 대각 합산이미지 생성부
412: 블러 정보 결정부
413: 블러 이미지 생성부
420: 출력부

Claims (22)

  1. 단말의 이미지 블러링(blurring) 처리 방법에 있어서,
    블러 이미지를 생성하기 위한 원본 이미지 및 블러 관련 정보를 획득하는 단계;
    상기 원본 이미지를 기초로 각각의 픽셀에 대한 대각 합산 이미지를 생성하는 단계; 및
    상기 블러 관련 정보 및 가중치에 따라 생성된 상기 대각 합산 이미지로부터 블러 이미지를 생성하는 단계;를 포함하고,
    상기 가중치는 상기 원본 이미지의 중심 픽셀들에 높은 가중치가 설정되고, 상기 원본 이미지의 주변 픽셀들에 낮은 가중치가 설정되는 것인, 이미지 블러링 처리 방법.
  2. 제 1항에 있어서, 상기 대각 합산 이미지를 생성하는 단계는,
    상기 원본 이미지를 기초로 각각의 픽셀에 대한 합산 이미지를 생성하는 단계; 및
    상기 합산 이미지를 이용하여 각각의 픽셀에 대한 대각 합산 이미지를 생성하는 단계;를 포함하는 것을 특징으로 하는 이미지 블러링 처리 방법.
  3. 제 2항에 있어서, 상기 합산 이미지는,
    상기 원본 이미지의 각 픽셀 값을 임의의 기준 픽셀을 기준으로 누진적으로 합산한 합산 픽셀 값의 집합인 것을 특징으로 하는 이미지 블러링 처리 방법.
  4. 제 3항에 있어서, 상기 합산 픽셀 값은,
    상기 기준 픽셀과 상기 각 픽셀을 양 대각 꼭지점으로 하는 사각형 영역에 포함된 픽셀 값의 합인 것을 특징으로 하는 이미지 블러링 처리 방법.
  5. 제 4항에 있어서, 상기 대각 합산 이미지는,
    기준 픽셀에서 각 픽셀에 이르는 대각방향의 경로에 위치한 합산 픽셀 값들의 합인 대각 합산 픽셀 값들의 집합인 것을 특징으로 하는 이미지 블러링 처리 방법.
  6. 제 5항에 있어서, 상기 대각 합산 픽셀 값은,
    상기 합산 이미지 픽셀을 기준으로 네 가지 대각 방향 중 어느 한 방향의 경로 상에 있는 합산 픽셀 값을 합한 값인 것을 특징으로 하는 이미지 블러링 처리 방법.
  7. 제 1항에 있어서 상기 블러 관련 정보는,
    블러 레벨, 블러 필터의 크기, 블러 필터의 종류 또는 상기 블러링을 처리할 영역에 대한 정보 중 어느 하나를 포함하는 것을 특징으로 하는 이미지 블러링 처리 방법.
  8. 제 1항에 있어서 상기 블러 이미지를 생성하는 단계는,
    상기 블러 관련 정보에 포함된 블러 레벨에 대응하는 블러 필터에 포함된 대각 합산 픽셀 값의 합을 계산하는 단계;
    계산된 상기 대각 합산 픽셀 값의 합을 기 설정된 가중치의 합으로 나누는 단계;로 구성되는 것을 특징으로 하는 이미지 블러링 처리 방법.
  9. 제 1항에 있어서, 상기 블러 이미지를 생성하는 단계는,
    상기 블러 관련 정보에 포함된 블러 레벨에 따라 상기 블러 이미지의 생성 연산에 필요한 비트 수를 결정하는 단계;를 포함하는 것을 특징으로 하는 이미지 블러링 처리 방법.
  10. 제 7항에 있어서, 상기 블러 레벨은,
    상기 원본 이미지의 각 픽셀별로 상이한 것을 특징으로 하는 이미지 블러링 처리 방법.
  11. 제 7항에 있어서, 상기 블러 관련 정보는,
    상기 단말의 터치 스크린 상의 터치 입력의 압력 또는 드래그(drag)입력에 따라 결정되는 것을 특징으로 하는 이미지 블러링 처리 방법.
  12. 이미지 블러링(blurring)을 처리하는 단말에 있어서,
    블러 이미지를 생성하기 위한 원본 이미지 및 블러 관련 정보를 입력 받는 입력부;
    상기 원본 이미지를 기초로 각각의 픽셀에 대한 대각 합산 이미지를 생성하고, 상기 블러 관련 정보 및 가중치에 따라 생성된 상기 대각 합산 이미지로부터 블러 이미지를 생성하고, 상기 원본 이미지의 중심 픽셀들에 높은 가중치를 설정하고, 상기 원본 이미지의 주변 픽셀들에 낮은 가중치를 설정하는 제어부; 및
    상기 생성된 블러 이미지를 표시하는 출력부;를 포함하는 단말.
  13. 제 12항에 있어서, 상기 제어부는,
    상기 원본 이미지를 기초로 각각의 픽셀에 대한 합산 이미지를 생성하고, 상기 합산 이미지를 이용하여 각각의 픽셀에 대한 대각 합산 이미지를 생성하는 것을 특징으로 하는 단말.
  14. 제 13항에 있어서, 상기 합산 이미지는,
    상기 원본 이미지의 각 픽셀 값을 임의의 기준 픽셀을 기준으로 누진적으로 합산한 합산 픽셀 값의 집합인 것을 특징으로 하는 단말.
  15. 제 14항에 있어서, 상기 합산 픽셀 값은,
    상기 기준 픽셀과 상기 각 픽셀을 양 대각 꼭지점으로 하는 사각형 영역에 포함된 픽셀 값의 합인 것을 특징으로 하는 단말.
  16. 제 12항에 있어서, 상기 대각 합산 이미지는,
    기준 픽셀에서 각 픽셀에 이르는 대각방향의 경로에 위치한 합산 픽셀 값들의 합인 대각 합산 픽셀 값들의 집합인 것을 특징으로 하는 단말.
  17. 제 16항에 있어서, 상기 대각 합산 픽셀 값은,
    상기 합산 이미지 픽셀을 기준으로 네 가지 대각 방향 중 어느 한 방향의 경로 상에 있는 합산 픽셀 값을 합한 값인 것을 특징으로 하는 단말.
  18. 제 12항에 있어서, 상기 블러 관련 정보는,
    블러 레벨, 블러 필터의 크기, 블러 필터의 종류 또는 상기 블러링을 처리할 영역에 대한 정보 중 어느 하나를 포함하는 것을 특징으로 하는 단말.
  19. 제 12항에 있어서, 상기 제어부는,
    상기 블러 관련 정보에 포함된 블러 레벨에 대응하는 블러 필터에 포함된 대각 합산 픽셀 값의 합을 계산하고, 계산된 상기 대각 합산 픽셀 값의 합을 기 설정된 가중치의 합으로 나누어 상기 블러 이미지를 생성하는 것을 특징으로 하는 단말.
  20. 제 12항에 있어서, 상기 제어부는,
    상기 블러 관련 정보에 포함된 블러 레벨에 따라 상기 블러 이미지의 생성 연산에 필요한 비트 수를 결정하는 것을 특징으로 하는 단말.
  21. 제 18항에 있어서, 상기 블러 레벨은,
    상기 원본 이미지의 각 픽셀별로 상이한 것을 특징으로 하는 단말.
  22. 제 18항에 있어서,
    상기 블러 관련 정보는,
    상기 입력부에 대한 터치 입력의 압력 또는 드래그(drag)입력에 따라 결정되는 것을 특징으로 하는 단말.
KR1020140170788A 2014-12-02 2014-12-02 이미지 블러링 방법 및 장치 KR102245745B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020140170788A KR102245745B1 (ko) 2014-12-02 2014-12-02 이미지 블러링 방법 및 장치
US14/957,153 US9704271B2 (en) 2014-12-02 2015-12-02 Method and apparatus for image blurring
EP15866247.8A EP3227856B1 (en) 2014-12-02 2015-12-02 Method and apparatus for image blurring
PCT/KR2015/013068 WO2016089114A1 (en) 2014-12-02 2015-12-02 Method and apparatus for image blurring

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140170788A KR102245745B1 (ko) 2014-12-02 2014-12-02 이미지 블러링 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20160066425A KR20160066425A (ko) 2016-06-10
KR102245745B1 true KR102245745B1 (ko) 2021-04-28

Family

ID=56079470

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140170788A KR102245745B1 (ko) 2014-12-02 2014-12-02 이미지 블러링 방법 및 장치

Country Status (4)

Country Link
US (1) US9704271B2 (ko)
EP (1) EP3227856B1 (ko)
KR (1) KR102245745B1 (ko)
WO (1) WO2016089114A1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016004595A1 (en) * 2014-07-09 2016-01-14 Splunk Inc. Minimizing blur operations for creating a blur effect for an image
CN107037901A (zh) * 2016-02-04 2017-08-11 中兴通讯股份有限公司 一种图像生成方法、终端和图形用户界面
KR102543529B1 (ko) * 2018-08-14 2023-06-15 현대모비스 주식회사 이미지 블러링 처리장치 및 그 방법
US11659137B1 (en) * 2020-11-30 2023-05-23 Securus Technologies, Inc. Video display blurring on demand
CN113822827B (zh) * 2021-09-18 2024-03-22 凌云光技术股份有限公司 一种基于fpga外置存储器的均值滤波方法及装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010034850A (ja) * 2008-07-29 2010-02-12 Sony Corp 画像処理装置、画像処理方法、及びプログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8077998B2 (en) 2004-01-05 2011-12-13 Production Resource Group, Llc Reduced complexity and blur technique for an electronic lighting system
US20090110285A1 (en) 2007-10-26 2009-04-30 Technion Research And Development Foundation Ltd Apparatus and method for improving image resolution using fuzzy motion estimation
US8472744B2 (en) * 2008-05-27 2013-06-25 Nikon Corporation Device and method for estimating whether an image is blurred
US9235063B2 (en) * 2010-09-09 2016-01-12 Adobe Systems Incorporated Lens modeling
TWI479453B (zh) * 2011-05-31 2015-04-01 Altek Corp 產生淺景深影像的方法及裝置
US9183621B2 (en) * 2011-09-07 2015-11-10 Shimadzu Corporation Image processing apparatus and radiographic apparatus having the same
KR20130103217A (ko) * 2012-03-09 2013-09-23 삼성전자주식회사 블러화된 이미지의 제공 장치 및 블러화된 이미지의 제공 방법
KR20130117378A (ko) * 2012-04-17 2013-10-28 한국전자통신연구원 이미지 정보를 활용한 온라인 정보 제공 방법
KR20140082384A (ko) * 2012-12-24 2014-07-02 주식회사 케이티 제스처를 인식하는 장치 및 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010034850A (ja) * 2008-07-29 2010-02-12 Sony Corp 画像処理装置、画像処理方法、及びプログラム

Also Published As

Publication number Publication date
EP3227856A4 (en) 2017-11-15
EP3227856A1 (en) 2017-10-11
US20160155216A1 (en) 2016-06-02
US9704271B2 (en) 2017-07-11
WO2016089114A1 (en) 2016-06-09
EP3227856B1 (en) 2021-03-24
KR20160066425A (ko) 2016-06-10

Similar Documents

Publication Publication Date Title
KR102245745B1 (ko) 이미지 블러링 방법 및 장치
CN109118542B (zh) 激光雷达与相机之间的标定方法、装置、设备及存储介质
JP5341509B2 (ja) 画像表示装置、画像表示方法、プラズマディスプレイパネル装置、プログラム、集積回路、及び、記録媒体
US9727984B2 (en) Electronic device and method for processing an image
CN109035158B (zh) 图像模糊处理方法、装置、存储介质及电子设备
JP6369150B2 (ja) アンチエイリアシングエッジを回復するフィルタリング方法及びフィルタリング装置
US20140241645A1 (en) Image processing apparatus, image processing method, and memory device in which image processing program is stored
EP3048555A1 (en) Image processing device, image processing method, and image processing program
CN109636730B (zh) 用于过滤深度图中的伪像素的方法
CN110874853A (zh) 目标运动的确定方法、装置、设备及存储介质
CN110706262A (zh) 图像处理方法、装置、设备及存储介质
JP2008217526A (ja) 画像処理装置、画像処理プログラム及び画像処理方法
US20150363666A1 (en) Image processing method and image processing device
CN108960012B (zh) 特征点检测方法、装置及电子设备
CN105427256A (zh) 一种红外图像增强方法及装置
US11024033B2 (en) Method and apparatus for processing image and computer program product thereof
US10922791B2 (en) Image processing apparatus and method
CN111462015A (zh) 地图轨迹的处理方法、装置、电子设备及存储介质
JPWO2013161838A1 (ja) 画像処理方法、及び画像処理装置
US9230309B2 (en) Image processing apparatus and image processing method with image inpainting
JP6797306B2 (ja) 画像処理装置、画像処理方法、及び画像処理プログラム
CN107862679B (zh) 图像检测区域的确定方法及装置
CN115937305A (zh) 图像处理方法、装置及电子设备
JP6417204B2 (ja) 画像処理装置および画像処理方法
US20130114888A1 (en) Image processing apparatus, computer program product, and image processing method

Legal Events

Date Code Title Description
A201 Request for examination
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant