KR102124014B1 - 영상 촬상 장치 및 이의 보케 영상 생성 방법 - Google Patents

영상 촬상 장치 및 이의 보케 영상 생성 방법 Download PDF

Info

Publication number
KR102124014B1
KR102124014B1 KR1020130129257A KR20130129257A KR102124014B1 KR 102124014 B1 KR102124014 B1 KR 102124014B1 KR 1020130129257 A KR1020130129257 A KR 1020130129257A KR 20130129257 A KR20130129257 A KR 20130129257A KR 102124014 B1 KR102124014 B1 KR 102124014B1
Authority
KR
South Korea
Prior art keywords
bokeh
image
pattern
regions
user
Prior art date
Application number
KR1020130129257A
Other languages
English (en)
Other versions
KR20150049122A (ko
Inventor
이승호
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130129257A priority Critical patent/KR102124014B1/ko
Priority to US14/242,155 priority patent/US9554037B2/en
Priority to EP20140175335 priority patent/EP2869270A1/en
Publication of KR20150049122A publication Critical patent/KR20150049122A/ko
Application granted granted Critical
Publication of KR102124014B1 publication Critical patent/KR102124014B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability

Abstract

영상 촬상 장치 및 이의 보케 영상 생성 방법이 제공된다. 본 영상 촬상 장치에 따르면, 영상을 촬상하는 촬상부, 영상에 대한 보케 옵션을 설정하기 위한 UI를 디스플레이하는 디스플레이부 및 UI 상에서 영상이 복수의 영역으로 분할되고, 각 영역별로 보케 패턴이 결정되면, 분할된 각 영역 내에 포함된 광원 포인트에, 각 영역별 보케 패턴을 각각 매핑시켜 보케 영상을 생성하는 제어부를 포함한다.

Description

영상 촬상 장치 및 이의 보케 영상 생성 방법 { IMAGE PHOTOGRAPHING APPARATUS FOR MAKING BOKEH IMAGE AND METHOD THEREOF }
본 발명은 영상 촬상 장치 및 이의 보케 영상 생성 방법에 관한 것으로, 더욱 상세하게는 사용자가 용이하게 다양한 컨셉의 보케 영상을 생성할 수 있도록 하는 영상 촬상 장치 및 이의 보케 영상 생성 방법에 관한 것이다.
최근 전자 장치의 발달 및 영상 촬상 기술의 발달로 사용자는 각종 영상 촬상 장치 및 영상 촬상 기능이 구비된 전자 장치를 이용하여 다양한 영상을 용이하게 촬상할 수 있다.
특히, 사용자는 단순히 피사체에 대한 영상을 촬상하는 것에 그치지 않고 다양한 효과를 입힌 영상을 촬상할 수 있으며, 사용자의 영상에 대한 각종 효과를 입히고자 하는 니즈도 다양화되고 있다.
그 중 하나로 아웃 포커싱 효과가 있을 수 있다. 아웃 포커싱 효과는 피사체를 촬영하는 경우, 피사체의 초점이 정확하게 설정되어 뚜렷하게 촬영되고 피사체 외의 배경은 초점이 설정되지 않은 상태로 촬상되어, 피사체에 초점이 집중되도록 하는 방법이다. 특히, 아웃 포커싱 촬영 시 빛이 촬영된 영역에 빛망울(Bokeh) 효과를 나타낼 수 있다.
그러나, 기존의 빛망울(Bokeh) 효과는 렌즈 앞에 필터를 장착하여 영상을 촬상하여, 필터의 모양대로 빛이 촬영된 영역의 모양을 변경하는 기술이 주로 사용되어 하나의 영상 안에 하나의 패턴을 포함하는 보케 영상의 구현만이 가능하였다.
따라서 다양한 보케 효과를 입힌 영상을 촬상하고자 하는 사용자의 니즈를 만족시키기 위한 필요성이 대두되었다.
본 발명은 상술한 필요성에 따라 안출된 것으로, 본 발명의 목적은 사용자가 용이하게 다양한 컨셉의 보케 영상을 생성할 수 있도록 하는 영상 촬상 장치 및 이의 보케 영상 생성 방법을 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 영상 촬상 장치는, 영상을 촬상하는 촬상부, 상기 영상에 대한 보케 옵션을 설정하기 위한 UI를 디스플레이하는 디스플레이부, 상기 UI 상에서 상기 영상이 복수의 영역으로 분할되고, 각 영역별로 보케 패턴이 결정되면, 상기 분할된 각 영역 내에 포함된 광원 포인트에, 각 영역별 보케 패턴을 각각 매핑시켜 보케 영상을 생성하는 제어부를 포함할 수 있다.
그리고, 상기 UI는 복수의 레이아웃을 표시하는 제1 UI 파트 및 상기 보케 패턴을 선택받기 위한 제2 UI 파트를 포함하며, 상기 제어부는, 상기 제1 UI 파트에서 상기 복수의 레이아웃 중 하나의 레이아웃이 선택되면 상기 선택된 레이아웃에 대응되는 개수 및 형태로 상기 복수의 영역을 결정하고, 상기 제2 UI 파트에서 복수의 보케 패턴이 선택되면, 선택된 각 보케 패턴을 상기 복수의 영역 각각에 대응되는 보케 패턴으로 결정하는 것을 특징으로 할 수 있다.
한편, 상기 UI는 사용자 드로잉이 가능한 UI 파트를 포함하며, 상기 제어부는, 상기 UI 파트에서 상기 영상을 분할하기 위한 제1 사용자 드로잉이 이루어지면, 제1 사용자 드로잉 궤적에 따라 상기 영상을 복수의 영역으로 분할하고, 상기 UI 파트에서 패턴을 드로잉하기 위한 제2 사용자 드로잉이 이루어지면, 상기 제2 사용자 드로잉에 따라 드로잉 되는 상기 패턴을 상기 보케 패턴으로 결정하는 것을 특징으로 할 수 있다.
그리고, 저장부를 더 포함하며, 상기 제어부는, 상기 제1 사용자 드로잉에 의해 결정된 영역 분할 정보 및 상기 제2 사용자 드로잉에 의해 결정된 보케 패턴 정보를 상기 저장부에 저장할 수 있다.
한편, 외부 장치와 통신을 수행하기 위한 통신부;를 더 포함하며, 상기 제어부는, 상기 저장부에 저장된 상기 영역 분할 정보 및 상기 보케 패턴 정보를 상기 외부 장치로 전송하여 공유하는 것을 특징으로 할 수 있다.
그리고, 상기 제어부는, 상기 광원 포인트가 라인 형태로 이어지면, 상기 보케 패턴을 상기 라인을 따라 복수 개로 매핑시키며, 상기 복수 개의 보케 패턴의 투명도를 상기 광원 포인트의 밝기에 따라 점진적으로 변경하는 것을 특징으로 할 수 있다.
한편, 상기 제어부는, 상기 영상의 거리 또는 뎁스(Depth) 정보 중 어느 하나에 따라 상기 복수의 영역을 자동으로 결정하는 것을 특징으로 할 수 있다.
그리고, 상기 보케 패턴은, 그래픽 이미지, 사진, 텍스트, 기호, 숫자 중 적어도 하나를 포함하는 것을 특징으로 할 수 있다.
한편, 본 발명의 일 실시예에 따른 영상 촬상 장치의 보케 영상 생성 방법에 있어서, 영상을 촬상하는 단계, 상기 영상에 대한 보케 옵션을 설정하기 위한 UI를 디스플레이하는 단계, 상기 UI 상에서 상기 영상을 복수의 영역으로 분할하고 각 영역별로 보케 패턴을 결정하는 단계 및 상기 분할된 각 영역 내에 포함된 광원 포인트에, 각 영역별 보케 패턴을 각각 매핑시켜 보케 영상을 생성하는 단계를 포함할 수 있다.
그리고, 상기 UI는 복수의 레이아웃을 표시하는 제1 UI 파트 및 상기 보케 패턴을 선택받기 위한 제2 UI 파트를 포함하며, 상기 결정하는 단계는, 상기 제1 UI 파트에서 상기 복수의 레이아웃 중 하나의 레이아웃이 선택되면 상기 선택된 레이아웃에 대응되는 개수 및 형태로 상기 복수의 영역을 결정하고, 상기 제2 UI 파트에서 복수의 보케 패턴이 선택되면, 선택된 각 보케 패턴을 상기 복수의 영역 각각에 대응되는 보케 패턴으로 결정하는 것을 특징으로 할 수 있다.
한편, 상기 UI는 사용자 드로잉이 가능한 UI 파트를 포함하며, 상기 결정하는 단계는, 상기 UI 파트에서 상기 영상을 분할하기 위한 제1 사용자 드로잉이 이루어지면, 제1 사용자 드로잉 궤적에 따라 상기 영상을 복수의 영역으로 분할하고, 상기 UI 파트에서 패턴을 드로잉하기 위한 제2 사용자 드로잉이 이루어지면, 상기 제2 사용자 드로잉에 따라 드로잉 되는 상기 패턴을 상기 보케 패턴으로 결정하는 것을 특징으로 할 수 있다.
그리고, 상기 제1 사용자 드로잉에 의해 결정된 영역 분할 정보 및 상기 제2 사용자 드로잉에 의해 결정된 보케 패턴 정보를 저장하는 단계를 더 포함하는 것을 특징으로 할 수 있다.
한편, 저장된 상기 영역 분할 정보 및 상기 보케 패턴 정보를 외부 장치로 전송하여 공유하는 단계를 더 포함할 수 있다.
그리고, 상기 보케 영상을 생성하는 단계는, 상기 광원 포인트가 라인 형태로 이어지면, 상기 보케 패턴을 상기 라인을 따라 복수 개로 매핑시키며, 상기 복수 개의 보케 패턴의 투명도를 상기 광원 포인트의 밝기에 따라 점진적으로 변경하는 것을 특징으로 할 수 있다.
한편, 상기 결정하는 단계는, 상기 영상의 거리 또는 뎁스(Depth) 정보 중 어느 하나에 따라 상기 복수의 영역을 자동으로 결정하는 것을 특징으로 할 수 있다.
그리고, 상기 보케 패턴은, 그래픽 이미지, 사진, 텍스트, 기호, 숫자 중 적어도 하나를 포함하는 것을 특징으로 할 수 있다.
본 발명의 다양한 실시예에 따르면, 사용자는 다양한 컨셉의 보케 영상을 생성할 수 있다.
도 1은 본 발명의 일 실시 예에 따른, 영상 촬상 장치의 구성을 도시한 블럭도,
도 2는 본 발명의 또 다른 실시 예에 따른, 영상 촬상 장치의 구성을 도시한 블럭도,
도 3 내지 도 6은 본 발명의 다양한 실시 예에 따른, 영역 및 보케 패턴을 결정하기 위한 UI를 도시한 도면,
도 7 및 도 8은 본 발명의 일 실시 예에 따른, 보케 효과를 입히기 전과 후의 영상을 도시한 도면,
도 9는 본 발명의 일 실시 예에 따른, 광원 포인트가 라인 형태로 이루어진 경우에 보케 효과를 입힌 영상을 도시한 도면,
도 10 및 도 11은 본 발명의 다양한 실시 예에 따른, 영상 촬상 장치의 보케 영상 생성 방법을 도시한 흐름도,
도 12는 영역 설정 방법을 도시한 흐름도, 그리고,
도 13은 패턴 설정 방법을 도시한 흐름도이다.
이하에서는 첨부된 도면을 참조하여, 본 발명의 다양한 실시 예를 좀더 상세하게 설명한다. 본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다. 그리고 후술 되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 일 실시예에 따른, 영상 촬상 장치(100)의 구성을 간략히 도시한 블럭도이다. 도 1에 도시된 바와 같이, 영상 촬상 장치(100)는 촬상부(110), 디스플레이부(120) 및 제어부(130)를 포함한다. 이때 영상 촬상 장치(100)는 카메라일 수 있으나, 이는 일 실시예에 불과할 뿐, 촬상부(110)가 존재하는 휴대폰, 태블릿 PC, 디지털 카메라, 캠코더, 노트북 PC, PDA등과 같은 다양한 전자 장치로 구현될 수 있다.
촬상부(110)는 영상을 촬상하기 위한 구성요소이다. 즉, 촬상부(110)는 렌즈를 통해 입력된 광신호를 이미지 센서를 통해 전기적 신호로 변환하여 피사체의 영상을 입력받을 수 있다. 이때, 피사체란 생성된 촬영 영상 내의 주 피사체 및 배경을 포함하는 모든 물체를 가리킨다.
특히, 촬상부(110)는 영상의 초점이 명확히 맞지 않은 부분에 존재하는 빛을 둥근 빛망울(Bokeh)형상으로 촬상할 수 있다.
한편, 디스플레이부(120)는 촬상부(110)를 통해 촬상한 영상을 디스플레이하거나, 저장부에 저장된 영상을 디스플레이하기 위한 구성요소이다. 그리고, 디스플레이부(120)는 영상에 대한 보케 옵션을 설정하기 위한 UI를 디스플레이할 수 있다.
보케 옵션은 영역을 분할하는 옵션과 보케 패턴을 설정하는 옵션을 포함한다. 즉, 보케 옵션을 설정하기 위한 UI는 영역을 분할하는 UI와 보케 패턴을 설정하는 UI를 포함할 수 있다. 보케 패턴은 그래픽 이미지, 사진, 텍스트, 기호, 숫자 중 적어도 하나를 포함할 수 있다. 예를 들면, 별, 하트, 왕관 모양 등의 그래픽 이미지일 수 있고, 인물 및 모형의 사진일 수 있으며, "A, B, HAPPY, LOVE" 등과 같은 다양한 텍스트일 수 있다.
한편, 디스플레이부(120)는 보케 옵션 중 영역을 분할하는 옵션과 보케 패턴을 설정하는 옵션을 순차적으로 디스플레이하거나, 동시에 디스플레이할 수 있다. 보케 옵션을 설정하기 위한 UI에 대한 구체적인 실시 예는 후술한다.
제어부(130)는 영상 촬상 장치(100)의 전반적인 동작을 제어하기 위한 구성요소이다. 특히, 제어부(130)는 보케 옵션을 설정하기 위한 UI 상에서 영상이 복수의 영역으로 분할되고, 각 영역별로 보케 패턴이 결정되면, 분할된 각 영역 내에 포함된 광원 포인트에 각 영역별 보케 패턴을 각각 매핑시켜 보케 영상을 생성한다.
즉, 제어부(130)는 저장부에 저장된 각종 모듈을 이용하여 광원 포인트를 검출한다. 상술한 바와 같이 광원이 촬상되면, 빛망울을 형성하게 된다. 광원 포인트란 촬상된 이미지 내에서 광원에 의해 빛망울이 형성된 부분을 의미한다. 제어부(130)는 보케 옵션 설정 UI에서 입력받은 보케 옵션을 이용하여 각 광원 포인트에 보케 패턴을 매핑하여 보케 영상을 생성한다.
그리고, 보케 옵션을 설정하기 위한 UI 중 영역을 분할하는 UI에서 영상을 다양한 형태로 분할하는 복수의 레이아웃이 디스플레이되고, 사용자로부터 복수의 레이아웃 중 어느 하나를 선택받는 경우, 제어부(130)는 선택된 레이아웃에 대응되는 개수 및 형태로 복수의 영역을 결정할 수 있다.
또한, 보케 옵션을 설정하기 위한 UI 중 보케 패턴을 설정하는 UI에서 다양한 형태의 보케 패턴이 디스플레이되고, 사용자로부터 복수의 보케 패턴 중 어느 하나를 선택받는 경우, 제어부(130)는 선택된 각 보케 패턴을 복수의 영역 각각에 대응되는 보케 패턴으로 결정할 수 있다.
즉, 영역을 분할하는 UI에서 영상을 세로 방향 및 균등한 크기로 2등분 하는 레이아웃이 선택되고 보케 패턴을 설정하는 UI에서 하트 모양의 보케 패턴 및 별 모양의 보케 패턴이 선택된 경우, 제어부(130)는 2등분 된 영역의 좌측에서 검출된 광원 포인트에 하트 모양의 보케 패턴을 매핑하고, 우측에서 검출된 광원 포인트에 별 모양의 보케 패턴을 매핑하여 보케 영상을 생성할 수 있다. 각 보케 패턴을 매핑할 각 영역은 보케 옵션 설정 UI를 통해 사용자로부터 다시 선택받을 수 있다.
또한, 영역을 분할하는 UI에서 영상을 균등한 크기로 4등분 하는 레이아웃이 선택되고 보케 패턴을 설정하는 UI에서 하트 모양의 보케 패턴 및 별 모양의 보케 패턴이 선택된 경우, 제어부(130)는 4개의 영역 중 사용자의 선택에 의해 또는 임의의 영역에 하트 모양의 보케 패턴을 매핑하고, 그 외 영역에 별 모양의 보케 패턴을 매핑하여 보케 영상을 생성할 수 있다.
한편, 보케 옵션을 설정하기 위한 UI는 사용자 드로잉이 가능할 수 있다. 즉, UI는 터치 패널을 이용하여, 사용자의 손가락 또는 영상 촬상 장치(100)의 외부에 구비된 터치 펜 등을 이용하여 사용자 드로잉을 입력받을 수 있다.
보케 옵션을 설정하기 위한 UI 중 영역을 분할하기 위한 UI파트에서 영상을 분할하기 위한 사용자 드로잉이 이루어지면, 제어부(130)는 사용자 드로잉 궤적에 따라 영상을 복수의 영역으로 분할할 수 있다.
그리고, 보케 옵션을 설정하기 위한 UI 중 보케 패턴을 설정하기 위한 UI파트에서 패턴에 대한 사용자 드로잉이 이루어지면, 제어부(130)는 사용자 드로잉에 의한 패턴을 보케 패턴으로 결정할 수 있다.
즉, UI가 디스플레이하는 복수의 레이아웃 또는 패턴 중 어느 하나를 선택하지 않아도, 사용자 드로잉에 의해 보케 영상을 생성하기 위한 영역을 임의의 레이아웃으로 분할하고 보케 패턴을 드로잉하여 보케 영상을 생성할 수 있다.
또한, 보케 옵션을 설정하기 위한 UI는 타 전자 장치를 통해 사용자 명령을 입력받을 수 있다. 예를 들면, 타 전자 장치가 사용자 PC이고, 무선 또는 유선으로 사용자 PC와 영상 촬상 장치(100)가 통신하는 경우, 제어부(130)는 사용자 PC가 보케 옵션을 설정하기 위한 UI를 디스플레이하도록 제어할 수 있다. 그리고, 제어부(130)는 사용자 PC을 통해 기 설정된 레이아웃 또는 보케 패턴의 선택 또는 영역 또는 패턴에 대한 사용자 드로잉을 입력받아 영상의 영역을 분할하고 보케 패턴을 설정하도록 제어할 수 있다.
본 발명의 또 다른 실시 예에 따르면, 영상 촬상 장치(100)는 도 2에 도시된 바와 같이 통신부(140)를 더 포함하거나, 저장부(150)를 더 포함할 수 있다.
한편, 도 2는 영상 촬상 장치(100)가 통신 기능, 동영상 재생 기능, 디스플레이 기능, 촬영 시점 변경 기능, 보케 옵션을 설정하기 위한 UI 디스플레이 기능, 보케 영상 생성 기능 등과 같이 다양한 기능을 구비한 장치인 경우를 예로 들어 각종 구성 요소들을 종합적으로 도시한 것이므로, 실시 예에 따라서는, 도 2에 도시된 구성 요소 중 일부는 생략 또는 변경될 수도 있고, 다른 구성요소가 더 추가될 수도 있다.
도 2의 구성요소들 중에서 도 1에 도시된 구성요소와 동일한 구성요소들에 대해서는 중복된 설명은 생략한다.
통신부(140)는 다양한 유형의 통신방식에 따라 다양한 유형의 외부 기기와 통신을 수행하는 구성이다. 즉, 통신부(140)는 와이파이 칩, 블루투스 칩, NFC칩, 무선 통신 칩 등과 같은 다양한 통신 칩을 포함할 수 있다. 이때, 와이파이 칩, 블루투스 칩, NFC 칩은 각각 WiFi 방식, 블루투스 방식, NFC 방식으로 통신을 수행한다. 이 중 NFC 칩은 135kHz, 13.56MHz, 433MHz, 860~960MHz, 2.45GHz 등과 같은 다양한 RF-ID 주파수 대역들 중에서 13.56MHz 대역을 사용하는 NFC(Near Field Communication) 방식으로 동작하는 칩을 의미한다. 와이파이 칩이나 블루투스 칩을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 무선 통신 칩은 IEEE, 지그비, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evoloution) 등과 같은 다양한 통신 규격에 따라 통신을 수행하는 칩을 의미한다.
한편, 제어부(130)는 외부 장치에 저장된 영상을 통신부(140)를 통해 수신하도록 제어할 수 있고, 저장부(150)에 저장된 영상을 통신부(140)를 통해 외부 장치로 전송하도록 제어할 수 있다. 그리고, 제어부(130)는 저장부(150)에 저장된 영역 분할 정보 및 보케 패턴 정보를 통신부(140)를 통해 외부 장치로 전송하도록 제어할 수 있다. 즉, 다른 영상 촬상 장치를 포함한 외부 전자 장치에서 사용자의 선택 또는 드로잉에 의해 결정된 영역 분할 레이아웃 및 보케 패턴을 공유할 수 있도록 제어부(130)는 통신부(140)를 통해 영역 분할 정보 및 보케 패턴 정보를 송수신하도록 제어할 수 있다.
또한, 타 전자 장치에서 영역 분할 정보 및 패턴 정보가 입력되는 경우, 제어부(130)는 입력된 영역 분할 정보 및 패턴 정보를 수신하도록 통신부(140)를 제어할 수 있다.
저장부(150)는 영상 촬상 장치(100)를 구동하기 위한 다양한 소프트웨어 모듈 및 데이터 등을 저장하기 위한 구성요소이다. 특히, 저장부(150)는 사용자 드로잉에 의해 결정된 영역 분할 정보 및 보케 패턴 정보를 저장할 수 있다.
구체적으로 저장부(150)가 저장할 수 있는 소프트웨어의 예로는, UI 생성 모듈(151), 광원 포인트 검출 모듈(152) 및 보케 패턴 관리 모듈(153)이 있다.
저장부(150)에 저장된 UI 생성 모듈(151)은 제어부(130)에 의해 실행되어, 보케 옵션을 설정하기 위한 UI를 생성하여 디스플레이하기 위한 모듈이다. 즉, UI 생성 모듈은 보케 옵션을 설정하기 위한 UI로써, 영역을 분할하는 UI 및 보케 패턴을 설정하는 UI를 생성할 수 있다.
또한, 저장부(150)에 저장된 광원 포인트 검출 모듈(152)은 제어부(130)에 의해 실행되어, 영상에 포함된 광원 포인트를 검출하기 위한 모듈이다. 즉, 광원 포인트 검출 모듈은 보케 패턴을 매핑하기 위한 광원 포인트를 검출할 수 있다.
그리고, 저장부(150)에 저장된 보케 패턴 관리 모듈(153)은 사용자로부터 직접 선택되거나, 사용자 드로잉에 의해 입력된 보케 패턴을 관리하기 위한 소프트웨어이다. 즉, 보케 패턴 관리 모듈(153)이 제어부(130)에 의해 실행되면, 보케 패턴 관리 모듈(153)은 사용자로부터 선택되는 빈도가 높은 보케 패턴을 저장부(150)에 저장할 수 있다. 이 후에, 보케 옵션을 선택하기 위한 UI가 표시될 때, 보케 패턴 관리 모듈(153)은 빈도가 높은 보케 패턴을 사용자에게 추천할 수 있다. 이와 같이, 사용자 드로잉에 의해 입력된 보케 패턴은 저장부(150)에 저장되어 계속 사용될 수 있다.
한편, 광원 포인트 검출 모듈(152)에 의해 검출된 광원 포인트가 라인 형태로 이어진 경우, 제어부(130)는 보케 패턴을 라인을 따라 복수 개로 매핑시키며, 복수 개의 보케 패턴의 투명도를 광원 포인트의 밝기에 따라 점진적으로 변경할 수 있다. 그리고, 제어부(130)는 영상을 복수 개의 영역으로 결정하는 레이아웃의 선택 또는 사용자 드로잉 없어도 영상의 거리 또는 뎁스(Depth) 정보에 따라 복수의 영역으로 자동으로 결정하도록 제어할 수 있다. 이에 대한 구체적인 실시 예에 대해서는 후술한다.
상술한 바와 같은 영상 촬상 장치(100)에 의해, 사용자는 영상을 복수 개의 영역으로 분리하여 각 영역에 다양한 보케 패턴을 매핑한 보케 영상을 생성할 수 있다.
한편,도 3 내지 도 8을 참고하여 보케 영상을 생성하는 방법을 설명한다.
도 3에 도시된 바와 같이, 디스플레이부(120)는 영역을 분할하는 UI를 디스플레이할 수 있다. 즉, 영역을 분할하는 UI는 다양한 형태로 분할된 복수의 레이아웃(31, 32, 33, 34)을 포함할 수 있다. 그리고, 영역을 분할하는 UI는 복수의 레이아웃 중 어느 하나의 레이아웃이 선택되는 경우 선택된 레이아웃을 디스플레이할 수 있도록 영역의 분할을 디스플레이하는 창(30)을 포함할 수 있다.
또한, 디스플레이부(120)는 터치 패널을 포함할 수 있고, 디스플레이하는 창(30)은 사용자 드로잉에 의해 영역을 분할할 수 있다.
한편, 도 4에 도시된 바와 같이, 디스플레이부(120)가 보케 패턴을 설정하는 UI를 디스플레이할 수 있다. 즉, 보케 패턴을 설정하는 UI는 다양한 형태의 보케 패턴(41, 42, 43, 44)을 포함할 수 있다. 예를 들어, 보케 패턴을 설정하는 UI에 디스플레이된 보케 패턴 중 하트 모양의 보케 패턴(43)이 선택되면, 디스플레이부(120)는 선택된 보케 패턴(43)에 하이라이트를 디스플레이할 수 있다.
그리고, 보케 패턴을 설정하는 UI는 복수의 보케 패턴 중 어느 하나의 보케 패턴이 선택되는 경우 선택된 보케 패턴을 디스플레이하는 창(40)을 포함할 수 있다. 따라서, 상술한 예와 같이 하트 모양의 보케 패턴(43)이 선택되면, 선택된 보케 패턴을 디스플레이하는 창(40)은 하트 모양의 보케 패턴을 디스플레이할 수 있다.
한편, 디스플레이부(120)는 터치 패널을 포함할 수 있고, 디스플레이하는 창(40)은 사용자 드로잉에 의해 보케 패턴을 입력받을 수 있다. 즉, 보케 패턴을 설정하는 UI가 포함하지 않은 보케 패턴이라 할지라도, 보케 패턴을 설정하는 UI는 사용자 드로잉에 의해 다양한 보케 패턴을 입력받을 수 있다.
한편, 도 5는 본 발명의 일 실시 예에 따른 디스플레이부(120)가 영역을 분할하는 UI 및 보케 패턴을 설정하는 UI를 동시에 디스플레이하는 경우를 도시한 도면이다.
즉, 디스플레이부(120)는 일부에는 영역을 분할하는 UI(50)를 디스플레이하고, 일부에는 보케 패턴을 설정하는 UI(55)를 디스플레이할 수 있다. 이 경우에도, 디스플레이부(120)는 터치 패널을 포함할 수 있고, 사용자의 손가락 또는 터치 펜(150)을 이용한 사용자 드로잉에 의해 영역을 분할하고, 보케 패턴을 설정할 수 있다.
한편, 도 6은 도 3에서 도시된 바와 같이 영역이 분할되고, 보케 패턴으로 별 모양 패턴 및 하트 모양 패턴이 선택된 경우를 도시한 도면이다. 보케 패턴이 순차적으로 별 모양 패턴 및 하트 모양 패턴이 선택된 경우 제어부(130)는 임의로 각 보케 패턴을 분할된 영역에 매핑되도록 제어할 수 있다. 또한, 제어부(130)는 사용자에게 복수 개의 보케 패턴을 매핑할 위치를 입력받는 UI를 디스플레이할 수 있다. 즉, 영상이 복수 개의 영역으로 분할되고 복수 개의 보케 패턴이 선택된 경우, 제어부(130)는 임의로 또는 사용자의 명령에 의해 보케 패턴을 각 영역에 매핑하도록 제어할 수 있다.
도 7은 영상에서 빛망울이 포함된 영상에서 광원 포인트를 검출하고 영역을 분할하는 실시 예를 도시한 도면이다. 즉, 영상 촬상 장치(100)는 촬상된 영상에 광원이 포함된 경우, 각 광원(71, 72, 73, 74, 75, 76)을 검출할 수 있다.
광원을 검출하는 알고리즘은 입력받은 영상을 흑백 영상으로 변경하고, 흰색으로 치우치는 부분을 검출하여, 검출된 영역을 광원으로 판정하는 알고리즘이 사용될 수 있다. 즉, 영상을 흑백 영상으로 변경하는 경우, 기 설정된 정도 이상의 빛이 입력된 부분은 흰색으로 변경될 것이므로, 흰색으로 변경된 부분을 광원으로 검출하는 알고리즘이 사용될 수 있다. 그러나 이는 일 실시예에 불과할 뿐, 영상에서 광원을 판단하여 검출하는 다양한 알고리즘이 사용될 수 있다.
각 빛망울은 빛의 양, 초점 또는 조리개의 크기 등에 따라 그 크기 및 모양이 달라질 수 있다. 예를 들면, 초점이 제대로 맞지 않을수록 빛망울이 더욱 크게 번지게 되며, 조리개의 모양에 따라 각지거나 둥근 형태의 빛망울이 생길 수 있다.
제어부(130)가 광원 포인트를 검출한 경우, 제어부(130)는 분할된 각 영역에 보케 패턴을 매핑할 수 있다. 보케 패턴이 매핑되면, 각 빛망울은 각지거나 둥근 형태에서 매핑된 보케 패턴의 형태로 바뀌게 된다. 즉, 도 8에 도시된 바와 같이 각 빛망울은 제어부(130)의 제어에 의해 둥근 모양에서 각 영역에 따라 별 모양 패턴 및 하트 모양 패턴으로 매핑되어 디스플레이된다.
보케 패턴은 촬상부(110)가 영상을 촬상하면서 동시에 매핑될 수 있으며, 사용자 명령에 의해 영상을 캡쳐한 뒤 보케 패턴을 매핑할 수도 있고, 저장부(150)에 기 저장된 이미지를 로딩하여 제어부(130)의 제어에 의해 보케 패턴을 매핑할 수도 있다.
한편, 도 9는 본 발명의 또 다른 실시 예에 의해 광원 포인트가 라인 형태로 이루어진 경우에 보케 효과를 입힌 영상을 도시한 도면이다.
예를 들면, 촬상부(110)의 렌즈를 장시간(예를 들면 5초) 노출한 경우, 촬상부(110)는 광원 포인트를 라인 형태로 촬상할 수 있다.
따라서, 촬상부(110)의 렌즈를 장시간 노출한 경우에도 제어부(130)는 광원 포인트를 검출하여 각 광원 포인트에 보케 패턴을 매핑하여 보케 영상을 생성할 수 있는데, 보케 패턴도 광원 포인트를 따라 라인 형태로 매핑될 것이다. 이와 같은 경우 빛이 상대적으로 강한 부분은 상대적으로 많은 개수의 광원 포인트가 검출될 수 있으며, 검출된 각 광원 포인트가 보케 패턴으로 매핑되므로 제어부(130)는 보케 패턴도 선명하게 디스플레이되도록 제어할 수 있다.
그리고, 빛이 상대적으로 약한 부분은 상대적으로 적은 개수의 광원 포인트가 검출될 수 있으며, 검출된 각 광원 포인트가 보케 패턴으로 매핑되므로 제어부(130)는 보케 패턴이 빛이 상대적으로 강한 부분보다 흐리게 디스플레이되도록 제어할 수 있다.
도 9를 참고하면, 건물 앞을 지나가는 차량의 불빛을 촬영한 이미지를 도시한 도면으로, 오른쪽으로 갈수록 차량의 수가 많아져 불빛이 더욱 강해지는 경우를 도시하였다. 따라서 상술한 방향으로 보케 영상을 생성하면, 제어부(130)는 오른쪽으로 갈수록 광원 포인트를 많이 검출하고, 보케 패턴이 선명하게 디스플레이되도록 제어할 수 있다.
또한, 빛이 이동하는 영상을 촬상하는 경우, 분할된 복수 개의 영역에 각각 다른 보케 패턴을 매핑할 수 있다. 예를 들면, 영상의 영역이 상하의 같은 크기로 분할되어 있으며 상 부분은 별 모양의 패턴, 하 부분은 하트 모양의 패턴으로 매핑되도록 설정되고 빛이 위에서 아래로 이동한 경우, 제어부(130)는 빛이 이동하는 모든 경로에 각 영역에 설정된 패턴이 매핑도록 제어하여 보케 영상을 생성할 수 있다. 즉, 보케 패턴의 매핑 없이 영상이 촬영되는 경우에는 마지막에 빛이 존재하는 부부만 촬상되겠지만, 제어부(130)는 기 설정된 시간 또는 사용자 선택에 의한 시간 동안 빛이 이동한 모든 경로에 각 영역별 패턴이 매핑되도록 제어하여 보케 영상을 생성할 수 있다.
한편, 상술한 보케 영상 생성 방법은 영상을 복수개의 영역으로 분할하는 사용자 입력이 있는 경우의 실시 예에 대해 서술하였으나, 제어부(130)는 영상의 거리 또는 뎁스(Depth) 정보에 따라 상기 복수의 영역을 자동으로 결정할 수 있다.
구체적으로, 영상을 복수 개의 영역으로 분할하는 레이아웃을 선택하는 사용자 명령 또는 사용자 드로잉이 없어도, 제어부(130)는 영상의 거리 또는 뎁스(Depth) 정보에 따라 영상의 거리 또는 뎁스가 기 설정된 값보다 이상인 영역 및 미만인 영역으로 영상의 영역을 결정할 수 있다.
예를 들면, 영상 촬상 장치(100)에서 자동 초점(Auto Focus)모드를 사용하여 영상을 촬상하는 경우, 제어부(130)는 초점이 정확하게 맞은 기설정된 크기의 영역을 제1 영역, 제1 영역의 좌측 영역을 제2 영역 그리고 제1 영역의 우측 영역을 제3 영역으로 분할하여 영상을 복수의 영역으로 결정할 수 있다. 즉, 자동 초점 모드를 사용하는 경우 촬상된 영상에서 초점이 정확하게 맞은 부분을 기준으로 하고 촬상된 영상의 원근감을 판단할 수 있다.
한편, 거리 또는 뎁스 정보를 추출하기 위해 자동 초점(Auto Focus)모드를 사용하는 것을 일 실시예에 불과할 뿐, 촬상된 영상의 거리 또는 뎁스 정보를 추출할 수 있는 다른 방법이 사용될 수도 있음은 물론이다.
한편, 도 10은 본 발명의 일 실시 예에 따른, 영상 촬상 장치의 보케 영상 생성 방법을 도시한 흐름도이다.
우선, 영상 촬상 장치(100)는 영상을 촬상하고(S1000), 영상에 대한 보케 옵션을 설정하기 위한 UI를 디스플레이한다(S1010). 여기서 보케 옵션을 설정하기 위한 UI은 영역을 분할하는 UI 및 보케 패턴을 설정하는 UI를 포함할 수 있다. 즉, 영역을 분할하는 UI는 영상을 다양한 형태로 분할하는 복수의 레이아웃을 디스플레이할 수 있고, 사용자로부터 복수의 레이아웃 중 어느 하나를 선택받는 경우, 선택된 레이아웃에 대응되는 개수 및 형태로 복수의 영역을 결정할 수 있다.
또한, 보케 패턴을 설정하는 UI는 다양한 형태의 보케 패턴을 디스플레이할 수 있고, 사용자로부터 복수의 보케 패턴 중 어느 하나를 선택받는 경우, 선택된 각 보케 패턴을 복수의 영역 각각에 대응되는 보케 패턴으로 결정할 수 있다.
그리고, 영역을 분할하는 UI 및 보케 패턴을 설정하는 UI는 터치 패널상에 구현되어, 사용자의 손 또는 터치 펜으로 사용자 드로잉에 의해 영역의 분할에 대한 입력 및 보케 패턴을 입력받을 수 있다.
한편, 보케 패턴은 그래픽 이미지, 사진, 텍스트, 기호, 숫자 중 적어도 하나를 포함할 수 있다. 예를 들면, 별, 하트, 왕관 모양 등의 그래픽 이미지일 수 있고, 인물 및 모형의 사진일 수 있으며, A, B, HAPPY, LOVE와 같은 텍스트일 수 있다.
UI상에서 영상을 복수의 영역으로 분할하고, 각 영역별로 보케 패턴을 결정하면(S1020), 분할된 각 영역 내에 포함된 광원 포인트에 각 영역별 보케 패턴을 각각 매핑시켜 보케 영상을 생성한다(S1030). 즉, 각종 모듈을 이용하여 광원 포인트를 검출되면, 보케 옵션 설정 UI에서 입력받은 영역을 분할하는 레이아웃 및 보케 패턴의 형태를 이용하여 각 광원 포인트에 입력받은 보케 패턴을 매핑하여 보케 영상을 생성한다.
한편, 도 11은 본 발명의 또 다른 실시예에 의한 영상 촬상 장치의 보케 영상 생성 방법을 도시한 흐름도이다.
우선, 영상 촬상 장치(100)는 보케 모드에 진입한다(S1100). 보케 모드는 영상을 복수의 영상으로 분할하고 보케 패턴을 입력하여 보케 영상을 생성하도록 하는 UI를 디스플레이하고 사용자 명령을 입력받을 수 있는 모드이다. 보케 모드는 영상을 촬상하기 전에 진입하거나 기 저장된 이미지를 로딩하기 전에 진입할 수 있다.
사용자 영역 드로잉 모드에 진입 여부를 판단한다(S1105). 즉, 사용자로부터 사용자 드로잉에 의해 영역을 분할하는 드로잉 모드에 진입할지 여부를 판단한다. 사용자 영역 드로잉 모드에 진입하면(S1105-Y), 사용자 영역 드로잉 모드에 진입한다(S1110). 즉, 사용자 영역 드로잉 모드는 터치 패드를 통해 사용자 드로잉에 의해 입력된 형태로 영역을 설정하는 모드를 의미한다. 따라서, 사용자는 니즈에 맞게 다양한 레이아웃으로 영상을 분할할 수 있다.
한편, 사용자 영역 드로잉 모드에 진입하지 않는 경우(S1105-N), 기 설정된 영역 호출 모드에 진입한다(S1115). 즉, 영상을 다양한 형태로 분할하는 복수의 레이아웃이 디스플레이되고, 사용자로부터 복수의 레이아웃 중 어느 하나를 선택받아 영역을 분할할 수 있다.
사용자 드로잉 또는 기 설정된 영역의 선택에 의해 영역 설정이 완료되면(S1120), 패턴 드로잉 모드 진입 여부를 판단한다(S1130). 즉, 사용자로부터 사용자 드로잉에 의해 패턴을 결정하는 드로잉 모드에 진입할지 여부를 판단한다. 패턴 드로잉 모드에 진입하면(S1125-Y), 패턴 드로잉 모드에 진입한다(S1130). 즉, 패턴 드로잉 모드는 터치 패드를 통해 사용자 드로잉에 의해 입력된 패턴을 보케 패턴으로 설정하는 모드를 의미한다. 따라서, 사용자는 니즈에 맞게 다양한 보케 패턴을 입력하여, 보케 영상을 생성할 수 있다.
한편, 패턴 드로잉 모드에 진입하지 않는 경우(S1125-N), 기 설정된 패턴 호출 모드에 진입한다(S1135). 즉, 복수의 다양한 패턴이 디스플레이되고, 사용자로부터 복수의 패턴 중 적어도 하나를 선택받아 보케 패턴을 선택할 수 있다.
사용자 드로잉 또는 기 설정된 패턴의 선택에 의해 패턴 입력이 완료되면(S1140), 기 저장된 이미지 선택 여부를 판단한다(S1145). 즉, 영상 촬상 장치(100)가 저장부(150)를 구비하는 경우, 저장부(150)는 외부 장치로부터 이미지를 수신하여 저장하거나, 촬상부(110)를 통해 기 촬영한 영상을 저장할 수 있다.
기 저장된 이미지가 선택된 경우(S1145-Y), 기 저장된 이미지를 로딩한다(S1150). 한편, 기 저장된 이미지가 선택되지 않은 경우(S1145-N), 촬상부(110)를 통해 영상을 촬상한다(S1155).
기 저장된 이미지를 로딩 또는 영상의 촬상에 의해 영상이 디스플레이되면, 영상에서 광원 포인트를 분리한다(S1160). 그리고, 사용자 드로잉 또는 기 설정된 영역의 선택에 의해 설정된 영역에 따라 영상을 복수의 영역으로 분할한다(S1165).
한편, 영상을 복수의 영역으로 분할하면, 각 영역에 존재하는 광원 포인트에 영역별로 입력된 패턴을 매핑한다(S1170). 마지막으로 영상 촬상 장치(100)는 매핑된 이미지를 보정할 수 있다(S1175). 즉, 영상 촬상 장치(100)는 자동으로 영상의 밝기, 선예도 등을 보정하여 사용자에게 개선된 영상을 제공할 수 있다.
한편, 촬상부(110)를 통해 영상을 촬상하는 동시에 영상을 설정된 영역의 레이아웃에 따라 분할하고, 광원 포인트를 검출하여, 각 광원 포인트에 입력된 패턴을 각각 매핑시켜 보케 영상을 생성할 수 있으나, 촬상부(110)를 통해 촬상되는 영상을 캡쳐하고, 캡쳐된 영상을 설정된 영역의 레이아웃에 따라 분할하고, 광원 포인트를 검출하여, 각 광원 포인트에 입력된 패턴을 각각 매핑시켜 보케 영상을 생성할 수도 있다.
한편, 상술한 바와 같이 영상의 영역을 분할하기 위한 영역 설정 명령을 입력받고, 패턴을 입력받을 수도 있으나, 패턴을 입력받은 후 영상의 영역을 분할할 수도 있다. 따라서, 도 12 및 도 13을 참고하여, 영상 설정 및 패턴 설정 방법을 구체적으로 설명한다.
우선, 도 12는 영역 설정 방법을 도시한 흐름도이다. 영역 설정 모드에 진입하면(S1200), 영역 설정 UI를 디스플레이한다(S1210).
영상 촬상 장치(100)의 초기 설정 또는 사용자의 선택에 따라, 사용자가 영역을 입력(S1220)할 수 있으며, 기 설정된 영역을 선택(S1240)할 수 있다.
즉, 영역 설정 UI는 영상을 다양한 형태로 분할하는 복수의 레이아웃을 디스플레이하고, 사용자로부터 복수의 레이아웃 중 어느 하나를 선택받는 경우, 선택된 레이아웃에 대응되는 개수 및 형태로 복수의 영역을 분할하기 위한 UI이다. 그리고, 영역 설정 UI는 터치 패널상에 구현될 수 있고, 사용자 드로잉에 의해 영역의 설정을 입력받을 수 있다. 즉, UI는 사용자의 손가락 또는 영상 촬상 장치(100)의 외부에 구비된 터치 펜(150) 등을 이용하여 사용자 드로잉을 입력받을 수 있다. 사용자 드로잉에 의해 사용자 영역을 입력하는 경우, 입력받은 영역의 좌표 데이터를 취득하고 영역을 분할할 수 있다(S1230).
사용자 드로잉 또는 기 설정된 영역의 선택에 의해 영역의 분할을 마친 경우, 분할된 영역의 순서를 표시한다(S1250). 즉, 분할된 영역의 순서는 영상 촬상 장치(100)의 초기 설정에 의해 표시될 수 있다. 한편, 사용자가 입력한 보케 패턴을 원하는 영역에 매핑하기 위해, 분할된 영역의 순서는 변경될 수 있다.
한편, 도 13은 보케 패턴 설정 방법을 도시한 흐름도이다. 패턴 설정 모드에 진입하면(S1300), 패턴 설정 UI를 디스플레이한다(S1310).
영상 촬상 장치(100)의 초기 설정 또는 사용자의 선택에 따라, 사용자가 패턴을 입력(S1320)할 수 있으며, 기 설정된 패턴을 선택(S1340)할 수 있다.
즉, 패턴 설정 UI는 다양한 형태의 복수 개의 패턴을 디스플레이하고, 사용자로부터 복수의 패턴 중 적어도 하나를 선택받기 위한 UI이다. 그리고, 패턴 설정 UI는 터치 패널상에 구현될 수 있고, 사용자 드로잉에 의해 패턴을 입력받을 수 있다. 즉, UI는 사용자의 손가락 또는 영상 촬상 장치(100)의 외부에 구비된 터치 펜(150) 등을 이용하여 사용자 드로잉에 의한 패턴을 입력받을 수 있다. 사용자 드로잉에 의해 패턴을 입력하는 경우, 입력받은 패턴을 저장할 수 있다(S1330). 즉, 영상 촬상 장치(100)가 저장부(150)를 구비하는 경우, 저장부(150)는 사용자 드로잉에 의해 입력받은 패턴을 저장할 수 있고, 제어부(130)는 저장된 패턴의 재사용이 가능하도록 제어할 수 있다. 사용자 드로잉 또는 기 설정된 패턴의 선택에 의해 패턴 설정 모드가 종료된다.
이상과 같이, 본 발명의 다양한 실시 예에 따르면, 사용자는 영상을 복수의 영역으로 분할하고, 각 영역에 매핑할 보케 패턴을 입력하여, 하나의 영상에 다양한 보케 패턴으로 매핑된 보케 영상을 생성할 수 있다.
한편, 상술한 다양한 실시 예들에 따른 영상 촬상 장치의 보케 영상 생성 방법은 소프트웨어로 코딩되어 비일시적 판독 가능 매체(non-transitory readable medium) 에 저장될 수 있다. 이러한 비일시적 판독 가능 매체는 다양한 장치에 탑재되어 사용될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등이 될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100 : 영상 촬상 장치 110 : 촬상부
120 : 디스플레이부 130 : 제어부
140 : 통신부 150 : 저장부

Claims (16)

  1. 영상 촬상 장치에 있어서,
    영상을 촬상하는 촬상부;
    상기 영상에 대한 보케 옵션을 설정하기 위한 UI를 디스플레이하는 디스플레이부; 및
    상기 UI 상에서 상기 영상이 복수의 영역으로 분할되고, 상기 분할된 각 영역별로 보케 패턴이 결정되면, 상기 분할된 각 영역 내에 포함된 광원 포인트에, 상기 결정된 보케 패턴을 각각 매핑시켜 보케 영상을 생성하는 제어부;를 포함하는 영상 촬상 장치.
  2. 제1항에 있어서,
    상기 UI는
    복수의 레이아웃을 표시하는 제1 UI 파트 및 상기 보케 패턴을 선택받기 위한 제2 UI 파트를 포함하며,
    상기 제어부는, 상기 제1 UI 파트에서 상기 복수의 레이아웃 중 하나의 레이아웃이 선택되면 상기 선택된 레이아웃에 대응되는 개수 및 형태로 상기 복수의 영역을 결정하고,
    상기 제2 UI 파트에서 복수의 보케 패턴이 선택되면, 선택된 각 보케 패턴을 상기 복수의 영역 각각에 대응되는 보케 패턴으로 결정하는 것을 특징으로 하는 영상 촬상 장치.
  3. 제1항에 있어서,
    상기 UI는
    사용자 드로잉이 가능한 UI 파트를 포함하며,
    상기 제어부는, 상기 UI 파트에서 상기 영상을 분할하기 위한 제1 사용자 드로잉이 이루어지면, 제1 사용자 드로잉 궤적에 따라 상기 영상을 상기 복수의 영역으로 분할하고,
    상기 UI 파트에서 패턴을 드로잉하기 위한 제2 사용자 드로잉이 이루어지면, 상기 제2 사용자 드로잉에 따라 드로잉 되는 상기 패턴을 상기 보케 패턴으로 결정하는 것을 특징으로 하는 영상 촬상 장치.
  4. 제3항에 있어서,
    저장부;를 더 포함하며,
    상기 제어부는,
    상기 제1 사용자 드로잉에 의해 결정된 영역 분할 정보 및 상기 제2 사용자 드로잉에 의해 결정된 보케 패턴 정보를 상기 저장부에 저장하는 영상 촬상 장치.
  5. 제4항에 있어서,
    외부 장치와 통신을 수행하기 위한 통신부;를 더 포함하며,
    상기 제어부는,
    상기 저장부에 저장된 상기 영역 분할 정보 및 상기 보케 패턴 정보를 상기 외부 장치로 전송하여 공유하는 것을 특징으로 하는 영상 촬상 장치.
  6. 제1항에 있어서,
    상기 제어부는,
    상기 광원 포인트가 라인 형태로 이어지면, 상기 보케 패턴을 상기 라인을 따라 복수 개로 매핑시키며, 상기 복수 개의 보케 패턴의 투명도를 상기 광원 포인트의 밝기에 따라 점진적으로 변경하는 것을 특징으로 하는 영상 촬상 장치.
  7. 제1항에 있어서,
    상기 제어부는,
    상기 영상의 거리 또는 뎁스(Depth) 정보 중 어느 하나에 따라 상기 복수의 영역을 자동으로 결정하는 것을 특징으로 하는 영상 촬상 장치.
  8. 제1항에 있어서,
    상기 보케 패턴은,
    그래픽 이미지, 사진, 텍스트, 기호, 숫자 중 적어도 하나를 포함하는 것을 특징으로 하는 영상 촬상 장치.
  9. 영상 촬상 장치의 보케 영상 생성 방법에 있어서,
    영상을 촬상하는 단계;
    상기 영상에 대한 보케 옵션을 설정하기 위한 UI를 디스플레이하는 단계;
    상기 UI 상에서 상기 영상을 복수의 영역으로 분할하고 분할된 각 영역별로 보케 패턴을 결정하는 단계; 및
    상기 분할된 각 영역 내에 포함된 광원 포인트에, 상기 결정된 보케 패턴을 각각 매핑시켜 보케 영상을 생성하는 단계;를 포함하는 보케 영상 생성 방법.
  10. 제9항에 있어서,
    상기 UI는
    복수의 레이아웃을 표시하는 제1 UI 파트 및 상기 보케 패턴을 선택받기 위한 제2 UI 파트를 포함하며,
    상기 결정하는 단계는,
    상기 제1 UI 파트에서 상기 복수의 레이아웃 중 하나의 레이아웃이 선택되면 상기 선택된 레이아웃에 대응되는 개수 및 형태로 상기 복수의 영역을 결정하고,
    상기 제2 UI 파트에서 복수의 보케 패턴이 선택되면, 선택된 각 보케 패턴을 상기 복수의 영역 각각에 대응되는 보케 패턴으로 결정하는 것을 특징으로 하는 보케 영상 생성 방법.
  11. 제9항에 있어서,
    상기 UI는
    사용자 드로잉이 가능한 UI 파트를 포함하며,
    상기 결정하는 단계는,
    상기 UI 파트에서 상기 영상을 분할하기 위한 제1 사용자 드로잉이 이루어지면, 제1 사용자 드로잉 궤적에 따라 상기 영상을 복수의 영역으로 분할하고,
    상기 UI 파트에서 패턴을 드로잉하기 위한 제2 사용자 드로잉이 이루어지면, 상기 제2 사용자 드로잉에 따라 드로잉 되는 상기 패턴을 상기 보케 패턴으로 결정하는 것을 특징으로 하는 보케 영상 생성 방법.
  12. 제11항에 있어서,
    상기 제1 사용자 드로잉에 의해 결정된 영역 분할 정보 및 상기 제2 사용자 드로잉에 의해 결정된 보케 패턴 정보를 저장하는 단계;를 더 포함하는 것을 특징으로 하는 보케 영상 생성 방법.
  13. 제12항에 있어서,
    저장된 상기 영역 분할 정보 및 상기 보케 패턴 정보를 외부 장치로 전송하여 공유하는 단계;를 더 포함하는 것을 특징으로 하는 보케 영상 생성 방법.
  14. 제9항에 있어서,
    상기 보케 영상을 생성하는 단계는,
    상기 광원 포인트가 라인 형태로 이어지면, 상기 보케 패턴을 상기 라인을 따라 복수 개로 매핑시키며, 상기 복수 개의 보케 패턴의 투명도를 상기 광원 포인트의 밝기에 따라 점진적으로 변경하는 것을 특징으로 하는 보케 영상 생성 방법.
  15. 제9항에 있어서,
    상기 결정하는 단계는,
    상기 영상의 거리 또는 뎁스(Depth) 정보 중 어느 하나에 따라 상기 복수의 영역을 자동으로 결정하는 것을 특징으로 하는 보케 영상 생성 방법.
  16. 제9항에 있어서,
    상기 보케 패턴은,
    그래픽 이미지, 사진, 텍스트, 기호, 숫자 중 적어도 하나를 포함하는 것을 특징으로 하는 보케 영상 생성 방법.
KR1020130129257A 2013-10-29 2013-10-29 영상 촬상 장치 및 이의 보케 영상 생성 방법 KR102124014B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020130129257A KR102124014B1 (ko) 2013-10-29 2013-10-29 영상 촬상 장치 및 이의 보케 영상 생성 방법
US14/242,155 US9554037B2 (en) 2013-10-29 2014-04-01 Electronic apparatus for making bokeh image and method thereof
EP20140175335 EP2869270A1 (en) 2013-10-29 2014-07-02 Electronic apparatus for making bokeh image and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130129257A KR102124014B1 (ko) 2013-10-29 2013-10-29 영상 촬상 장치 및 이의 보케 영상 생성 방법

Publications (2)

Publication Number Publication Date
KR20150049122A KR20150049122A (ko) 2015-05-08
KR102124014B1 true KR102124014B1 (ko) 2020-06-17

Family

ID=51265470

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130129257A KR102124014B1 (ko) 2013-10-29 2013-10-29 영상 촬상 장치 및 이의 보케 영상 생성 방법

Country Status (3)

Country Link
US (1) US9554037B2 (ko)
EP (1) EP2869270A1 (ko)
KR (1) KR102124014B1 (ko)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016085381A (ja) * 2014-10-27 2016-05-19 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 暗号化方法、暗号化装置、及び暗号化システム
US9805176B2 (en) * 2015-07-30 2017-10-31 Toshiba Tec Kabushiki Kaisha Shared system and terminal device
KR102436954B1 (ko) 2015-11-24 2022-08-29 삼성전자주식회사 영상 촬영 장치 및 영상 촬영 장치의 제어 방법
US10887509B2 (en) * 2015-12-07 2021-01-05 Facebook, Inc. Systems and methods for dynamically providing layouts based on media content selection
US10009536B2 (en) 2016-06-12 2018-06-26 Apple Inc. Applying a simulated optical effect based on data received from multiple camera sensors
KR20180036463A (ko) 2016-09-30 2018-04-09 삼성전자주식회사 이미지 처리 방법 및 이를 지원하는 전자 장치
CN108848311A (zh) * 2018-07-25 2018-11-20 北京小米移动软件有限公司 全景照片显示方法及装置
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
KR102597518B1 (ko) * 2019-02-20 2023-11-03 삼성전자주식회사 영상에 보케 효과를 적용하는 전자 장치 및 그 제어 방법
CN112348748A (zh) * 2019-08-09 2021-02-09 北京字节跳动网络技术有限公司 图像特效处理方法、装置、电子设备和计算机可读存储介质
CN110864208B (zh) * 2019-11-20 2021-04-02 商丘师范学院 一种具有自动追踪功能的计算机显示器
WO2021120120A1 (en) * 2019-12-19 2021-06-24 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Electric device, method of controlling electric device, and computer readable storage medium
WO2021155575A1 (en) * 2020-02-07 2021-08-12 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Electric device, method of controlling electric device, and computer readable storage medium
KR20210101713A (ko) * 2020-02-10 2021-08-19 삼성전자주식회사 카메라를 포함하는 전자 장치 및 그의 동작 방법
CN112004032B (zh) * 2020-09-04 2022-02-18 北京字节跳动网络技术有限公司 视频处理方法、终端设备及存储介质
US11893668B2 (en) 2021-03-31 2024-02-06 Leica Camera Ag Imaging system and method for generating a final digital image via applying a profile to image information

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030053718A1 (en) 2001-09-17 2003-03-20 Kunihiro Yamamoto Image processing apparatus and method, and program
US20070030357A1 (en) 2005-08-05 2007-02-08 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Techniques for processing images
US20080303913A1 (en) 2005-08-26 2008-12-11 Koninklijke Philips Electronics, N.V. Imaging Camera Processing Unit and Method
US20090289952A1 (en) 2008-05-26 2009-11-26 Fujifilm Corporation Image processing apparatus, method, and program
US20130300760A1 (en) 2012-05-08 2013-11-14 Sony Corporation Image display apparatus, image display program, and image display method

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR200414237Y1 (ko) 2006-02-06 2006-04-17 주식회사 스토리오브 카메라의 보케 효과용 외부 필터
US8504932B2 (en) 2006-04-13 2013-08-06 Shutterfly, Inc. Image collage builder
JP5213500B2 (ja) 2008-04-04 2013-06-19 任天堂株式会社 画像変換プログラムおよび画像変換装置
KR20110070662A (ko) 2009-12-18 2011-06-24 한국전자통신연구원 렌즈 광학 특성의 가상 구현을 위한 영상 처리 장치 및 방법
KR101662846B1 (ko) * 2010-05-12 2016-10-06 삼성전자주식회사 아웃 포커싱 촬영에서 빛망울 효과를 생성하기 위한 장치 및 방법
JP5827466B2 (ja) * 2010-11-08 2015-12-02 オリンパス株式会社 撮像装置、撮像方法、およびプログラム
KR20110000048U (ko) 2010-12-08 2011-01-03 양정욱 카메라의 빛망울 효과용 외부 필터
US8824821B2 (en) * 2011-03-28 2014-09-02 Sony Corporation Method and apparatus for performing user inspired visual effects rendering on an image
KR101795600B1 (ko) * 2011-07-07 2017-11-08 삼성전자주식회사 디지털 촬영 장치, 그 제어방법, 및 컴퓨터 판독가능 저장매체
JP5864936B2 (ja) * 2011-07-23 2016-02-17 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
US9019310B2 (en) 2012-03-02 2015-04-28 Adobe Systems Incorporated Methods and apparatus for applying complex continuous gradients to images
US9418400B2 (en) * 2013-06-18 2016-08-16 Nvidia Corporation Method and system for rendering simulated depth-of-field visual effect

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030053718A1 (en) 2001-09-17 2003-03-20 Kunihiro Yamamoto Image processing apparatus and method, and program
US20070030357A1 (en) 2005-08-05 2007-02-08 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Techniques for processing images
US20080303913A1 (en) 2005-08-26 2008-12-11 Koninklijke Philips Electronics, N.V. Imaging Camera Processing Unit and Method
US20090289952A1 (en) 2008-05-26 2009-11-26 Fujifilm Corporation Image processing apparatus, method, and program
US20130300760A1 (en) 2012-05-08 2013-11-14 Sony Corporation Image display apparatus, image display program, and image display method

Also Published As

Publication number Publication date
US9554037B2 (en) 2017-01-24
EP2869270A1 (en) 2015-05-06
US20150116542A1 (en) 2015-04-30
KR20150049122A (ko) 2015-05-08

Similar Documents

Publication Publication Date Title
KR102124014B1 (ko) 영상 촬상 장치 및 이의 보케 영상 생성 방법
US10021294B2 (en) Mobile terminal for providing partial attribute changes of camera preview image and method for controlling the same
KR101821750B1 (ko) 이미지 처리 방법 및 장치
US20200394388A1 (en) Image processing method and apparatus, terminal, and computer-readable storage medium
US8897552B2 (en) Setting an operating-system color using a photograph
CN106688227B (zh) 多摄像装置、多摄像方法
US10095377B2 (en) Method and device for displaying icon badge
US11334225B2 (en) Application icon moving method and apparatus, terminal and storage medium
KR102313755B1 (ko) 이동 단말기 및 그 제어 방법
CN105488511B (zh) 图像的识别方法及装置
CN113395419A (zh) 电子设备、控制方法和计算机可读介质
CN110572574A (zh) 用于多焦点成像的系统和方法
CN104063123A (zh) 图标显示方法及装置
US9924090B2 (en) Method and device for acquiring iris image
CN105760884B (zh) 图片类型的识别方法及装置
CN103916593A (zh) 用于在具有相机的装置中处理图像的设备和方法
JP2017512335A (ja) デバイスのための画像編集技法
US11151398B2 (en) Anti-counterfeiting processing method, electronic device, and non-transitory computer-readable storage medium
CN105208284B (zh) 拍摄提醒方法及装置
CN105894042B (zh) 检测证件图像遮挡的方法和装置
CN105183755B (zh) 一种图片的显示方法及装置
CN106598429A (zh) 移动终端的窗口调整方法及装置
US10013151B2 (en) Method and terminal device for adjusting widget
KR101631966B1 (ko) 이동 단말기 및 이의 제어방법
US11367232B2 (en) Method and device for generating stickers

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant