KR101783196B1 - 모션 블러를 갖는 이미지를 얻기 위한 방법 및 장치 - Google Patents

Abstract

모션 블러를 갖는 일부를 포함하는 이미지를 얻기 위한 방법은: 물체 및 배경의 제 1, 제 2 및 제 3 사진을 결정된 순서로 촬영하도록 적어도 하나의 카메라를 제어하는 단계로서, 상기 제 1 사진은 제 1 노출 시간으로, 상기 제 2 사진은 제 2 노출 시간으로, 상기 제 3 사진은 제 3 노출 시간으로 촬영되고, 상기 제 2 노출 시간은 상기 제 1 및 상기 제 3 노출 시간보다 길고, 상기 물체 및/또는 상기 배경이 상기 적어도 하나의 카메라에 대해 움직이고 있다면, 상기 제 2 사진은 상기 배경 및/또는 상기 물체의 흐릿한 이미지를 포함하도록, 상기 적어도 하나의 카메라를 제어하는 단계; 및 상기 제 1, 제 2 및 제 3 사진을 사용하여, 상기 제 2 사진의 상기 흐릿한 이미지의 적어도 일부와 함께 상기 제 1 및/또는 제 3 사진으로부터 유도된 일부를 포함하는 최종 이미지를 생성하는 단계를 포함한다.

Description

모션 블러를 갖는 이미지를 얻기 위한 방법 및 장치{METHOD AND APPARATUS FOR OBTAINING AN IMAGE WITH MOTION BLUR}

본 발명의 분야는 사진술에 관한 것이다. 특별한 실시예들은 모션 블러(motion blur : 동작 흐려짐)를 갖는 일 부분을 포함하는 이미지를 얻기 위한 방법 및 장치, 컴퓨터 프로그램, 제어기, 및 방법을 수행하기 위한 프로그램을 인코딩하는 데이터 저장 디바이스에 관한 것이다.

사진술에서, 모션 블러는 정지 이미지에 움직임 및 속도의 느낌을 제공하기 위하여 간혹 사용된다. 그러나, 대부분의 경우들에서, 오로지 소수, 전형적으로 직업적인 사진사들만이, 제어된 방식으로 사진내에 모션 블러를 실제로 포함하게 하는 카메라 조작 레벨 및 전문기술에 도달한다.

덧붙여, 종래 기술들을 사용하여, 예컨대, Photoshop, GIMP, 등을 사용하여 사진의 후처리를 통해 납득할 수 있고 자연스러운 모션 블러를 도입하기는 어렵고 시간 소모적이다.

본 발명의 실시예들의 목적은 경험이 없는 사진사들이 제어된 방식으로 모션 블러를 포함하는 이미지들을 얻을 수 있도록 하는 것이다. 더 구체적으로, 본 발명의 실시예들의 목적은 사진사들의 사진들 내에서 모션 블러의 창조적인 사용을 통해 사진사들을 돕는 것이다.

본 발명의 제 1 양상에 따라, 모션 블러를 갖는 부분을 포함하는 이미지를 얻기 위한 방법이 제공된다. 이러한 방법은, 적어도 하나의 카메라가 적어도 하나의 물체 및 배경의 제 1, 제 2 및 제 3 사진을 촬영하도록 제어하는 단계; 및 상기 제 1, 제 2 및 제 3 사진을 사용하여 최종 이미지를 생성하는 단계를 포함한다. 제 1 사진은 제 1 노출 시간으로, 제 2 사진은 제 2 노출 시간으로, 제 3 사진은 제 3 노출 시간으로 촬영된다. 제 2 노출 시간은 제 1 및 제 3 노출 시간보다 길고, 제 2 사진이 상기 배경 및/또는 상기 물체의 흐릿한 이미지를 포함하는 방식이다. 적어도 하나의 카메라의 제어는, 제 1, 제 2 및 제 3 사진들이 결정된 순서로 촬영되는 방식이다. 이 순서가 반드시 제 1, 그 후 제 2, 그 후 제 3의 순서는 아니고, 제 1, 제 3, 제 2, 또는 임의의 다른 순서일 수 있음을 주목해야 한다. 제 1, 제 2 및 제 3 사진을 사용하여 최종 이미지의 생성은, 최종 이미지가 제 2 사진의 흐릿한 이미지의 적어도 일부 및 제 1 및/또는 제 3 사진으로부터 유도된 일부를 포함하는 방식이다.

본 발명의 실시예들은 특히, 3개의 사진들 중 2개가 상대적으로 짧은 노출 시간을 갖고, 사진들 중 하나가 상대적으로 긴 노출 시간을 갖는 일련의 적어도 3개의 사진들을 결합함으로써, 한 편으로는 긴 노출 시간으로 촬영된 사진의 흐릿한 부분 및 다른 한 편으로 나머지 부분의 선명한 이미지를 포함하는 개선된 최종 이미지를 생성할 수 있다는 창의적인 통찰력에 기초한다.

일 실시예에 있어서, 적어도 하나의 카메라의 제어는, 단일 카메라가 제 1, 제 2 및 제 3 사진을 촬영하도록 제어하는 단계를 포함하고, 바람직하게는 후속하는 사진들의 촬영 사이의 시간을 가능한 짧게 유지하면서 사진들은 번갈아 촬영된다.

일 실시예에 있어서, 상기 제어는, 제 3 사진이 제 2 사진 이후 촬영되고, 제 2 사진이 제 1 사진 후에 촬영되도록 적어도 하나의 카메라를 제어하는 단계를 포함한다. 이러한 방식으로, 제 1 및 제 3 사진은 물체의 위치 및 형태를 결정하도록 허용할 것이고, 이러한 정보는 이후 제 2 사진 내에서 흐릿한 이미지의 위치 및 형태를 결정하는데 사용될 수 있다. 바람직하게, 제 1 사진의 촬영과 제 2 사진의 촬영 사이의 시간 기간 및 제 2 사진의 촬영과 제 3 사진의 촬영 사이의 시간 기간은 1/100초 미만, 더 바람직하게는 1/300초 미만이다. 이들 값들이 전형적으로 가시 스펙트럼 내의 광선들을 사용하여 촬영된 사진을 위한 값들이다. 당업자는 예컨대 적외선, UV선, 뢴트겐선, 초음파, 전자계 주사, 등을 사용하여 얻어진 이미지들에 대해 상이한 범위들이 적용될 수 있음을 인식할 것이다.

바람직한 실시예에서, 제 1 및 제 3 노출 시간들은 1/100초 미만, 바람직하게는 1/300초 미만이다. 이러한 방식으로, 제 1 및 제 3 사진은 실질적으로 모션 블러가 없을 것이다. 제 2 노출 시간은 바람직하게 1/80초 초과, 더 바람직하게는 1/50초 초과, 더 바람직하게는 1/40초 초과이다. 다시, 당업자는 이들 값들이 전형적으로 가시 스펙트럼의 광선을 사용하여 촬영된 사진들을 위한 것음을 인식할 것이다. 이것은 상대적으로 긴 제 2 노출 시간에 부합하여, 물체 및/또는 배경이 움직이는 경우, 제 2 사진은 배경 및/또는 물체의 흐릿한 이미지를 포함할 것이다. 바람직한 실시예에 있어서, 제 1 및 제 3 노출 시간들은 제 2 노출 시간보다 적어도 5배, 바람직하게는 적어도 10배 짧다.

바람직한 실시예에서, 최종 이미지의 생성은, 상기 제 1 및 상기 제 3 사진 내에서 물체의 형태 및 위치를 결정하기 위하여 제 1 및 제 3 사진을 사용하는 단계; 제 1 및 제 3 사진 내에서 물체의 위치 및 형태를 사용하여 제 2 사진으로부터 흐릿한 이미지의 적어도 일부를 분리하는 단계; 최종 이미지를 생성하기 위하여, 흐릿한 이미지의 분리된 적어도 일부를 제 1 및/또는 제 3 사진으로부터 유도된 부분과 결합하는 단계를 포함한다. 이러한 실시예들에 있어서, 제 1 및 제 3 사진 내에서 물체의 위치 및 형태는 제 2 사진 내에서 흐릿한 이미지의 위치 형태를 결정하도록 허용할 것이어서, 흐릿한 이미지의 적어도 일부는 정렬 문제를 회피하면서 제 1 및 제 3 사진으로부터 유도된 부분과 결합될 수 있다.

본 발명의 실시예들에서, 제 2 사진 내에서 흐릿한 이미지는 물체의 흐릿한 이미지 또는 배경의 흐릿한 이미지일 수 있다. 제 1 및 제 3 사진에서 물체의 위치 및 형태를 결정함으로써, 제 2 사진 내에서 (선택적으로 흐릿한) 물체의 윤곽이 결정될 수 있다. 흐릿한 물체의 경우, 이러한 윤곽은 흐릿한 이미지의 경계를 형성한다. 흐릿한 배경의 경우, 이러한 윤곽은 배경의 흐릿한 이미지의 내측 경계에 부합하는 반면, 외측 경계는 제 2 사진의 외측 경계가 될 것이다. 사진들이 하나 이상의 물체를 포함하는 경우 유사한 고려들이 적용된다.

다른 가능한 실시예에 있어서, 제어하는 단계는 제 2 이미지 이전에 제 1 및 제 3 이미지를 촬영하도록, 또는 제 2 이미지 이후 제 1 및 제 3 이미지를 촬영하도록 적어도 하나의 카메라를 제어하는 단계를 포함한다. 이러한 실시예에 있어서, 제 1 및 제 3 이미지는 적어도 하나의 카메라에 대한 물체 또는 배경의 움직임 속도를 결정하기 위하여 사용될 수 있다. 이러한 동작 속도는 이후 제 2 사진 내에서 흐릿한 이미지의 위치 및 형태를 결정하기 위하여 사용될 수 있다. 만약 물체가 제 1 및 제 3 이미지 사이에서 움직이지 않는다면, 움직임 속도는 0일 것이고, 흐릿한 이미지는 제 2 사진 내에서 배경 이미지가 될 수 있다. 선택적으로, 최종 이미지를 생성하는 단계는 제 1 및/또는 제 3 사진으로부터 물체의 흐릿하지 않은 이미지를 유도하는 단계, 및 물체의 흐릿하지 않은 이미지를 최종 이미지에 오버레이시키는 단계를 포함한다.

바람직한 실시예에 따라, 최종 이미지를 생성하는 단계는, 물체에 기초한 스티칭을 사용하여 물체의 형태 및 위치를 결정하기 위하여 제 1 및 제 3 사진을 사용하는 단계; 제 1 및 제 3 배경 이미지를 생성하기 위하여 결정된 형태 및 위치를 고려하여 제 1 및 제 3 사진으로부터 물체를 제거하는 단계; 결합된 배경 이미지를 얻기 위하여 제 1 및 제 3 배경 이미지를 결합하는 단계; 제 2 사진 내에서 물체의 선택적으로 흐릿한 이미지의 위치 및 형태를 결정하기 위하여 결정된 위치 및 형태를 사용하는 단계; 및 제 2 사진 내에서 선택적으로 흐릿한 이미지의 위치를 고려하면서 제 2 사진의 선택적으로 흐릿한 이미지를 결합된 배경 이미지에 오버레이시키는 단계를 포함한다. 이러한 실시예는, 제 2 사진이 안정된 배경과 결합하여 동작 물체의 흐릿한 이미지를 포함할 때, 양호한 결과들을 제공할 것이다.

다른 실시예에 따라, 최종 이미지를 생성하는 단계는: 물체에 기초한 스티칭을 사용하여 물체의 형태 및 위치를 결정하기 위하여 제 1 및 제 3 사진을 사용하는 단계; 제 2 사진 내에서 물체의 선택적으로 흐릿한 이미지의 위치 및 형태를 결정하기 위하여 결정된 위치 및 형태를 사용하는 단계; 제 1 및/또는 제 3 사진 내에서 물체의 결정된 형태 및 위치를 고려하면서 제 1 및/또는 제 3 사진으로부터 물체의 흐릿하지 않은 이미지를 유도하는 단계; 및 제 2 사진 내에서 선택적으로 흐릿한 이미지의 위치를 고려하면서 물체의 흐릿하지 않은 이미지를 제 2 사진에 오버레이시키는 단계를 포함한다. 이러한 실시예는, 제 2 사진이 배경의 흐릿한 이미지를 포함할 때, 양호한 결과들을 제공할 것이다.

본 발명의 실시예들에 있어서, 예컨대 안정된 배경을 갖는 움직이는 물체에 특히 적합한 실시예인 상술한 제 1 실시예에 따른 제 1 최종 이미지, 및 예컨대 움직이는 배경에 특히 적합한 실시예인 상술한 제 2 실시예에 따른 제 2 최종 이미지의 두 가지 이미지가 생성될 수 있다. 따라서 사용자는 제 1 및 제 2 최종 이미지를 모두 제공받을 수 있고, 최상의 것을 선택할 수 있다. 대안적인 실시예에 있어서, 사용자는 최종 이미지가 적절하게 계산될 수 있는 "움직이는 물체" 모드 또는 "움직이는 배경" 모드를 선택하기 위한 선택 인터페이스를 제공받을 수 있다.

본 발명의 추가 양상에 따라, 컴퓨터 프로그램이 컴퓨터상에서 실행될 때, 상술한 실시예들 중 어느 하나의 단계들 중 어느 하나의 단계에 따라 방법을 수행하기 위한 컴퓨터-실행 가능한 명령들을 포함하는 컴퓨터 프로그램이 제공된다.

본 발명의 추가 양상에 따라, 상술한 방법의 실시예들 중 어느 하나의 하나 이상의 단계들을 수행하도록 프로그램된 컴퓨터 디바이스 또는 다른 하드웨어 디바이스가 제공된다. 다른 양상에 따라, 프로그램을 상술한 방법의 실시예들 중 어느 하나의 하나 이상의 단계들을 수행하기 위한 기계-판독 가능하고 기계-실행 가능한 형태로 인코딩하는 데이터 저장 디바이스가 제공된다.

다른 양상에 따라, 적어도 하나의 카메라와 상술한 데이터 저장 디바이스의 실시예를 포함하는 장치가 제공된다.

또 다른 양상에 따라, 제어기가 제공된다. 이러한 제어기는 적어도 하나의 카메라를 제어하여 물체 및 배경의 제 1, 제 2 및 제 3 사진을 촬영하도록 구성된다. 전형적으로, 이러한 사진은 물체 및/또는 배경이 적어도 하나의 카메라에 대해 움직일 때 촬영될 것이다. 제어기는 적어도 하나의 카메라를 제어하여 제 1 노출 시간으로 제 1 사진을 촬영하고, 제 2 노출 시간으로 제 2 사진을 촬영하고, 제 3 노출 시간으로 제 3 사진을 촬영하도록 추가로 구성되고, 제 2 노출 시간은 제 1 및 제 3 노출 시간보다 길어, 배경 및/또는 물체가 적어도 하나의 카메라에 대해 움직일 때 제 2 이미지는 배경 및/또는 물체의 흐릿한 이미지를 포함한다. 또한, 제어기는, 제 1, 제 2 및 제 3 사진이 결정된 순서로 촬영되도록, 적어도 하나의 카메라를 제어하도록 구성된다. 이러한 방식으로, 어느 사진이 어느 시간 순간에 촬영될 지가 알려진다.

일 실시예에 있어서, 제어기는, 1/100초보다 짧고, 바람직하게는 1/300초보다 짧은 제 1 및 제 3 노출 시간으로 제 1 및 제 3 사진을 촬영하고; 1/80초보다 길고, 바람직하게는 1/50초보다 길고, 더 바람직하게는 1/40초보다 긴 제 2 노출 시간으로 제 2 사진을 촬영하기 위하여 적어도 하나의 카메라를 제어하도록 구성된다.

다른 양상에 따라, 이미지 생성 모듈이 제공된다. 이미지 생성 모듈은 제 1, 제 2 및 제 3 사진을 수신하고, 제 2 사진의 흐릿한 이미지의 적어도 일부, 및 제 1, 제 2 및 제 3 사진을 사용하여 제 1 및/또는 제 3 사진으로부터 유도된 일부를 포함하는 최종 이미지를 생성하도록 구성된다.

일 실시예에 있어서, 제어기는 제 2 이미지 이전에 제 1 및 제 3 이미지를, 또는 제 2 이미지 이후 제 1 및 제 3 이미지를 촬영하도록 적어도 하나의 카메라를 제어하도록 구성된다. 이미지 생성 모듈은 이후 적어도 하나의 카메라에 대해 물체의 움직이는 속도를 결정하기 위하여 제 1 및 제 3 이미지를 사용하고; 제 2 사진 내에서 흐릿한 이미지의 위치를 결정하기 위하여 움직이는 속도를 사용하도록 구성될 수 있다.

일 실시예에 있어서, 이미지 생성 모듈은: 제 1 및 제 3 사진 내에서 물체의 형태 및 위치를 결정하기 위하여 상기 제 1 및 상기 제 3 사진을 사용하고; 제 1 및 제 3 사진 내에서 물체의 위치 및 형태를 사용하여 제 2 사진으로부터 흐릿한 이미지의 적어도 일부를 분리하고; 최종 이미지를 얻기 위하여 흐릿한 이미지의 분리된 적어도 일부를 제 1 및 /또는 제 3 사진으로부터 유도된 일부와 결합하도록 구성될 수 있다.

일 실시예에 있어서, 이미지 생성 모듈은: 물체에 기초한 스티칭을 사용하여 물체의 형태 및 위치를 결정하기 위하여 제 1 및 제 3 사진을 사용하고; 제 1 및/또는 제 3 사진 내에서 물체의 결정된 형태 및 위치를 사용하여 상기 제 1 및/또는 제 3 사진으로부터 배경 이미지를 유도하고; 제 2 사진 내에서 물체의 선택적으로 흐릿한 이미지의 위치를 결정하기 위하여 제 1 및 제 3 사진 내에서 결정된 위치를 사용하고; 최종 이미지를 얻기 위하여 제 2 사진 내에서 선택적으로 흐릿한 이미지의 위치를 고려하면서 제 2 사진의 선택적으로 흐릿한 이미지를 상기 배경 이미지에 오버레이시키도록 구성된다.

일 실시예에 있어서, 이미지 생성 모듈은: 물체에 기초한 스티칭을 사용하여 물체의 형태 및 위치를 결정하기 위하여 제 1 및 제 3 사진을 사용하고; 제 1 및 제 3 배경 이미지를 생성하기 위하여 결정된 형태 및 위치를 고려하여 상기 제 1 및 상기 제 3 사진으로부터 물체를 제거하고; 결합된 배경 이미지를 얻기 위하여 제 1 및 제 3 배경 이미지를 결합하고; 제 2 사진 내에서 물체의 선택적으로 흐릿한 이미지의 위치를 결정하기 위하여 제 1 및 제 3 사진 내에서 결정된 위치를 사용하고; 최종 이미지를 얻기 위하여 제 2 사진 내에서 선택적으로 흐릿한 이미지의 위치를 고려하면서 제 2 사진의 선택적으로 흐릿한 이미지를 상기 결합된 배경 이미지에 오버레이시키도록 구성된다.

일 실시예에 있어서, 이미지 생성 모듈은: 제 1 및/또는 제 3 사진으로부터 물체의 흐릿하지 않은 이미지를 유도하고; 물체의 흐릿하지 않은 이미지를 최종 이미지에 오버레이하도록 추가로 구성된다.

일 실시예에 있어서, 이미지 생성 모듈은: 물체에 기초한 스티칭을 사용하여 물체의 형태 및 위치를 결정하기 위하여 제 1 및 제 3 사진을 사용하고; 상기 제 1 및/또는 상기 제 3 사진으로부터 물체의 흐릿하지 않은 이미지를 유도하고; 제 2 사진 내에서 물체의 선택적으로 흐릿한 이미지의 위치를 결정하기 위하여 상기 제 1 및/또는 제 3 사진 내에서 결정된 위치를 사용하고; 최종 이미지를 얻기 위하여 제 2 사진 내에서 물체의 선택적으로 흐릿한 이미지의 결정된 위치를 고려하면서 물체의 흐릿하지 않은 이미지를 제 2 사진에 오버레이시키도록 구성된다.

또 다른 양상에 따라, 적어도 하나의 카메라, 상술한 실시예들 중 어느 하나에 따른 제어기, 및 선택적으로 상술한 실시예들 중 어느 하나에 따른 이미지 생성 모듈을 포함하는 장치가 제공된다. 또한, 이러한 장치는 이미지 생성 모듈에 의해 생성된 최종 이미지를 디스플레이하도록 구성된 디스플레이 디바이스를 포함할 수 있다. 예시적인 실시예들에 있어서, 이러한 장치는, 적합하게 구성된 스마트폰, 적합하게 구성된 디지털 카메라, 적어도 하나의 카메라를 갖는 적합하게 구성된 컴퓨터, 등일 수 있다. 또한, 이러한 장치는 사용자로 하여금 장치를 조작하는 것을 허용하도록 구성된 사용자 인터페이스를 포함할 수 있다. 사용자 인터페이스는 사용자가 장치를 "모션 블러를 갖는 사진" 동작 모드로 설정하는 것을 허용하도록 구성될 수 있다. 사용자 인터페이스는 장치가 "모션 블러를 갖는 사진" 동작 모드로 설정되었을 때 제어기를 활성화시켜 제 1, 제 2 및 제 3 사진의 촬영을 제어하기 위한 버튼을 포함할 수 있다. 이러한 버튼은 예컨대 디스플레이 디바이스가 터치 스크린을 포함하는 경우 디스플레이 디바이스에 디스플레이된 가상 버튼, 또는 물리적인 버튼이 될 수 있다.

첨부 도면들은 본 발명의 디바이스들의 현재 비제한적이고 예시적인 실시예들을 도시하기 위하여 사용된다. 첨부 도면들과 함께 읽혀질 때 다음의 상세한 설명으로부터, 본 발명의 특징들 및 목적들의 상기 및 다른 장점들은 더 자명해질 것이고, 본 발명은 더 잘 이해될 것이다.

도 1은 방법의 제 1 실시예를 개략적으로 도시하는 도면.
도 2 및 도 3은 방법의 제 2 실시예를 개략적으로 도시하는 도면들.
도 4는 방법의 제 3 실시예를 개략적으로 도시하는 도면.
도 5는 방법의 제 4 실시예를 개략적으로 도시하는 도면.
도 6은 장치의 일 실시예를 개략적으로 도시하는 도면.
도 7은 방법의 일 실시예를 도시하는 흐름도.
도 8은 방법의 생성 단계의 일 실시예를 도시하는 흐름도.
도 9는 방법의 생성 단계의 일 실시예를 도시하는 흐름도.
도 10은 방법의 생성 단계의 일 실시예를 도시하는 흐름도.
도 11은 방법의 생성 단계의 일 실시예를 도시하는 흐름도.

정지 이미지들에서, 상이한 유형들의 모션 블러가 구별될 수 있다.

유형 1 - 의도적이지 않게 움직이는 카메라, 정지 풍경 및/또는 물체(들).

전형적으로 이러한 유형의 모션 블러는 조명 조건이 열악할 때 관찰될 수 있다. 이러한 경우, 사진사 및/또는 카메라는 충분한 광을 포착할 수 있기 위하여 충분히 긴 셔터 속도들로 전환해야 할 것이다. 삼각대 상에 장착되지 않는다면, 의도적이지 않게 흐릿한 사진을 얻을 위험성이 높다.

유형 2 - 의도적이지 않게 움직이는 물체, 정지 카메라.

또한 이러한 유형의 모션 블러는 조명 조건들이 열악할 때 발생할 수 있고, 사진사 및/또는 카메라는 더 긴 셔터 속도들로 전환하여야 한다. 사진을 촬영할 때 물체가 움직이면, 모션 블러가 발생한다. 이러한 상황에서 삼각대를 사용하는 것은 도움이 되지 못한다.

유형 3 - 흐릿한 움직이는 물체(들)를 갖는 선명한 배경.

이러한 유형의 흐려짐은, 상대적으로 느린 셔터 속도와 결합하여 카메라를 정지시키거나(손으로 휴대), 삼각대에 장착시켜 고정한 상태로, 전형적으로 의도적으로 생성된다. 카메라를 삼각대 상에 장착함으로써, 낮은 셔터 속도를 사용하는 동안 배경의 의도적이지 않은 흐려짐은 회피될 수 있다. 그러나, 대부분의 취미 사진사들은 언제나 삼각대를 휴대하지는 않는다. 또한 삼각대와 카메라를 설치하는 것은 시간이 걸린다. 최악의 시나리오는, 설정이 종료되었을 때 사진을 촬영할 기회가 사라진 경우이다.

유형 4 - 선명한 움직이는 물체(들) 및 흐릿한 배경.

이러한 유형의 블러 또한 의도적으로 생성될 수 있다. 이는 물체(들)가 움직이는 것과 동일한 방향으로 그리고 동일한 속도로 카메라를 패닝함으로써 달성될 수 있다. 이것은 또한, 움직이는 자동차 내에서 사진이 촬영되고, 물체(들)가 자동차 내에서 있어서, 물체가 카메라에 대해 움직이지 않지만, 예컨대 창문을 통해 보이는 배경은 카메라에 대해 움직이는 경우에, 달성될 수 있다. 이론적으로, 느린 셔터 속도를 지원하는 임의의 카메라는 이러한 사진을 촬영하기 위하여 사용될 수 있다. 그러나, 실제 이러한 유형의 모션 블러의 이미지들을 촬영하기 위하여 움직임 및 속도의 우수한 장면에 대해 경험있는 사진사가 될 필요가 있다. 경험이 적은 사진사들은 (선명하도록 의도된) 움직이는 물체가 일부의 모션 블러를 갖는 사진으로 마무리 짓는다.

도 1은 모션 블러를 갖는 일부를 포함하는 사진을 얻기 위한 방법의 제 1 실시예를 도시한다. 이 실시예는 제한된 시간 간격, 전형적으로 1초 미만의 시간 간격 내에서 동일한 위치로부터 촬영된 세 장의 사진들(11, 12, 13)의 한 장면을 사용한다. 카메라에 대해 비교적 빠르게 움직이는 물체 또는 배경에 대해, 이러한 시간 간격은 상대적으로 짧을 수 있는 반면, 카메라에 대해 비교적 느리게 움직이는 물체 또는 배경에 대해, 이러한 시간 간격은 상대적으로 길 수 있다. 도 1에 도시된 노출 시간선은 세 장의 후속하는 사진들(11, 12, 13)의 생성을 위해 셔터가 개방 또는 폐쇄된 순간들을 나타낸다. 제 1 및 제 3 사진(11, 13)은 임의의 모션 블러를 회피하기 위하여 짧은 노출 시간(T1, T3)으로 촬영되었고, 반면에 제 2 사진(12)은, 카메라에 대해 움직이는 배경(도 1에 미도시, 도 3 참조) 또는 카메라에 대해 움직이는 하나 이상의 물체(들)에 모션 블러를 도입하기 위한 목적으로, 긴 노출 시간(T2)으로 촬영되었다. 후자는 트럭의 형태인 하나의 물체에 대해 도 1에 도시되었다. 제 1 사진(11)에서 트럭은 위치(P1)에 있고, 제 3 사진에서 트럭은 위치(P3)에 있다. 제 2 사진에서, 움직이는 트럭은 위치(P1) 및 위치(P3) 사이에서 확장하는 모션 블러의 부분(BP)을 생성한다.

3개의 사진들(11, 12, 13)은 제어된 방식으로 하나의 의도적으로 흐릿한 이미지를 생성하기 위하여 결합된다. 3개의 사진들을 결합하면서, 방법의 이러한 제 1 실시예는 이미지의 일부가 선명하게 보이는 반면 다른 부분이 동작으로 흐리게 보이는 이미지를 얻는 것을 용이하게 한다. 유형 4의 모션 블러를 위해, 배경은 더 선명하게 보일 것이고, 반면 물체는 동작으로 흐리게 보인다.

3개의 사진들(11, 12, 13)은 배경(유형 3)에 대해 또는 물체(유형 4)에 대해 거의 동일한 위치로부터 생성된다. 사진들(11, 12, 13)은 동일한 카메라에 의해 또는 동기화된 상이한 카메라들에 의해 촬영될 수 있다.

하나의 병합된 이미지를 생성하기 위한 목적으로 상이한 이미지들을 촬영하는 기술은 또한 오늘날 고급 카메라들에 공통적으로 사용 가능한 HDR 사진술(예, http://en.wikipedia.org/wiki/High-dynamic-range_imaging 참조)에 사용된다. 이들 카메라들은 상이한 노출들 및/또는 조리개들을 사용하여 수분의 1초에 상이한 이미지들을 촬영한다. 이러한 단계 이후, 카메라는 자동적으로 이미지들을 병합하여, 높은 다이내믹 레인지(HDR)를 갖는 하나의 이미지를 생성한다. 그러나, HDR 사진술은 모션 블러를 처리할 수 없고, 취미 사진사가 모션 블러를 갖는 개선된 이미지를 얻도록 허용하지 않는다.

보다 더 상세하게, 제 1 실시예는 다음의 단계들을 포함할 수 있다. 제 1 단계는, 제 1 사진(11)와 제 3 사진(13)이 빠른 노출, 예컨대 1/300초 미만의 노출 시간을 갖고, 제 2 사진(12)이 예컨대 1/40초보다 긴 느린 노출을 사용하는 3장의 후속하는 사진들을 자동 캡쳐하는 것으로 이루어진다. 당업자는 노출 시간들에 대한 언급된 범위들이 단순히 예들임을 인식할 것이다. 특정 실시예들에 있어서, 노출 시간에 대한 값들은 상이할 수 있다. 예컨대, 제 1/제 2 사진이 플래쉬광으로 촬영되면, 1/60초의 노출 시간으로 촬영될 수 있다. 이 경우, 플레쉬광은 이미지를 "고정(freeze)"시킬 플래쉬의 극히 짧은 광 펄스(약 1/1000초)일 것이다. 또한 과학 사진들, 예컨대 망원경으로 촬영되는 사진들을 촬영할 때, 제 1 및 제 3 사진에 대한 노출 시간은 훨씬 더 길 수 있다, 예컨대 1/100초보다 길 수 있다. 더욱이, 본 발명의 실시예들은 또한 적외선들, UV선들, 뢴트겐선들, 전자기파들, 초음파, 등을 사용하여 촬영된 사진들에도 적용될 수 있다. 이러한 사진들을 촬영하기 위하여, 가시 스펙트럼에서 사진들을 위해 사용된 노출 시간들과 비교하여 상당히 상이한 노출 시간들이 사용될 수 있다.

3장의 사진들(11, 12, 13)은 동일한 카메라에 의해, 또는 동일한 장소 상에서 상이한 동기화된 카메라들에 의해 생성될 수 있다. 제 2 단계에서, 움직이는 물체(들)의 경계들 및 장소(위치)는 제 1 사진(11) 및 제 3 사진(13)에 기초하여 결정된다. 이러한 결정은 움직이는 물체상에 정렬시키면서 사진들(11, 13)을 스티칭함으로써 이루어질 수 있다. 도시된 예에서, 트럭의 형태 및 위치(P1, P3)가 결정될 것이다. 제 3 단계에서, 제 2 사진(12) 내에서 물체(들)의 노출된 영역이 제 1 사진(11) 및 제 3 사진(13) 내에서 물체의 결정된 위치(P1, P3)의 보간에 기초하여 결정된다. 추가의 진보된 실시예에서, 이러한 결정은 제 1 사진(11) 및 제 2 사진(12)의 캡쳐 사이, 및 제 2 사진(12) 및 제 3 사진(13)의 캡쳐 사이의 작은 양의 시간(ΔT)을 고려할 수 있다. 실제, T1, T2, T3 및 ΔT가 알려진 값들이기 때문에, 물체가 일정한 속도로 움직인다고 간주하면, 물체의 노출된 영역의 정확한 위치 및 형태가 결정될 수 있다. 실제, ΔT는 매우 작을 수 있고, 이 경우 위치들(P1 및 P3)이 노출된 영역의 가장자리들을 형성한다고 간주할 수 있다. 물체가 카메라에 대해 움직이고 있는지, 또는 배경이 카메라에 대해 움직이고 있는지에 관계없이, 물체의 결정된 노출 영역의 지식은 제 2 사진(12)의 흐릿한 부분(BP)을 분리하는데 사용될 수 있고, 이러한 흐릿한 부분(BP)은 물체(들)(도 1에 도시된) 또는 배경(도 1에 미도시, 도 3의 아래의 논의를 참조)와 부합한다. 제 4 단계에서, 이러한 분리된 흐릿한 부분(BP)은 모션 블러를 포함하는 최종 이미지를 얻기 위하여 제 1 및 제 3 사진으로부터 유도된 흐릿하지 않은 부분과 결합된다. 물체가 움직이고 있고 배경이 안정적인 것으로 간주되면, 흐릿한 부분은 사진(2) 내에서 물체의 노출 영역과 부합할 수 있고, 흐릿하지 않은 부분은 제 1 및/또는 제 3 사진으로부터 물체를 제거함으로써 얻어진 배경 이미지에 대응할 수 있다. 물체가 정지해 있고(또는 의도적이지 않게만 움직이고), 배경이 움직이는 것으로 간주되면, 흐릿한 부분은 사진(2)의 배경과 부합할 수 있고, 흐릿하지 않은 부분은 제 1 및/또는 제 3 사진으로부터 추출된 물체의 분리된 이미지에 대응할 수 있다.

도 2 및 도 3은 모션 블러를 갖는 이미지를 얻기 위한 방법의 제 2 실시예를 도시한다. 이 실시예는 정지 사진들을 위한 카메라에서 구현될 수 있다. 카메라의 메뉴에서, 사용자는 "개선된 모션 블러" 설정을 선택할 수 있다. 바람직한 실시예에서, 사용자는 제 2 사진을 위한 노출 시간, 예, 1/30초, 1/15초, 등을 규정할 수 있다. 카메라가 사진을 생성하도록 트리거될 때, 카메라는 3장의 사진들(11, 12, 13:도 2의 단계(101) 참조)(또는 21, 22, 23: 도 3의 단계(201) 참조)의 한 장면을 자동적으로 시작할 것이다.

3장의 사진들이 촬영되었을 때, 카메라는 2개의 최종 이미지들(20,27)을 생성할 것이다(아래 참조). 그 후, 사용자는 원하는 최종 이미지를 선택할 수 있다. 제 1 최종 이미지에 대해, 카메라는 안정적인 배경 및 움직이는 물체를 가정하고, 반면에 제 2 최종 이미지에 대해 움직이는 배경 및 안정적인 물체가 가정된다. 도 2 및 도 3의 예는 3장의 사진들(11, 12, 13 및 21, 22, 23)의 상이한 설정에 기초하여 제 1 및 제 2 최종 이미지의 선택을 도시하지만, 물론 실제로는 사진들의 이러한 설정은 동일하다. 이러한 예는 유형 3의 모션 블러에 대해 제 1 최종 이미지의 생성이 양호한 결과를 산출할 수 있는 반면, 유형 4의 모션 블러에 대해 제 2 최종 이미지의 생성이 양호한 결과를 산출할 수 있음을 도시한다.

제 1 병합 사진(20)을 생성하기 위한 처리 흐름은 도 2에 도시되었다. 이러한 처리 흐름에서, 카메라는 흐릿하지 않은 배경과 동작으로 흐릿한 물체를 가정한다. 단계(102)에서, 제 1 사진(11) 및 제 3 사진(13)이 스티칭된다. 이러한 스티칭은 물체에 기초하여 이루어진다. 움직이는 물체를 결정하기 위하여, 오토포커스 시스템으로부터의 정보가 사용될 수 있다. 물체의 정확한 형태, 즉 경계 라인은 비교를 통해, 즉 제 1 사진과 제 3 사진을 스티칭함으로써 결정된다(14 참조). 결과 이미지(15)에서, 스티칭 가능한 영역은 물체의 분리된 이미지를 얻기 위하여 제 1 및 제 3 사진으로부터 추출된다.

선택적인 단계(103)에서, 확장된 배경이 생성된다. 단계(102)에서 결정된 제 1 및 제 3 사진 내에서 물체의 위치(P1, P3)에 기초하여, 물체는 제 1 및 제 3 사진(11, 13)으로부터 제거되어, 각각 이미지들(16 및 17)을 초래한다. 이들 2개의 이미지들은 이후 스티칭되어 확장된 배경의 이미지(18)를 형성한다. 이 이미지(18)에서, 동과하는 물체로 인해 풍경 내의 숨겨진 영역은 최소로 줄어든다. 확장된 배경 이미지(18)를 사용하는 대신, ΔT가 전형적으로 매우 작다는 것을 고려하여 오로지 제 1 사진으로부터 또는 오로지 제 2 사진으로부터 추출된 배경 이미지를 사용할 수도 있다(청구항 1항에 대한 상기 논의 참조).

단계(104)에서, 제 1 사진(11) 및 제 3 사진(13) 내에서 움직이는 물체의 형태 및 위치에 기초하여, 제 2 사진(12)을 캡쳐하기 위해 노출이 행해진 동안 물체가 어디에 있었는지를 결정하기 위하여 선형 보간이 행해진다. 이러한 선형 보간에 기초하여, 제 2 사진(12) 내에서 노출된 영역이 결정된다. 노출된 영역은 점선으로 이미지(19) 내에 그려진다.

단계(105)에서, 확장된 배경 이미지(18)는 노출된 영역의 위치(이미지(19))에 따라 제 2 사진의 흐릿한 부분(BP)과 결합된다. 이는 모션 블러를 포함하는 제 1 최종 이미지(20)를 초래하고, 이러한 최종 이미지에서 사진사가 예견하는 바와 같이, 배경은 모션 블러가 없고 (빠른 노출로 캡쳐되고), 반면에 물체는 움직임으로 흐릿한다(느린 노출로 챕쳐된다).

도 3은 제 2 최종 사진(27)을 위한 처리 흐름을 도시한다. 이러한 처리 흐름에서, 카메라는 흐릿하지 않은 물체와 함께 동작으로 흐릿한 배경을 가정한다. 단계(202)에서, 제 1 및 제 3 사진(21, 23)은 스티칭된다. 이러한 스티칭은 물체에 기초하여 이루어진다. 움직이는 물체를 결정하기 위하여, 오토포커스 시스템으로부터의 정보가 사용될 수 있다. 2개의 이미지들을 비교(스티칭)함으로써 물체의 정확한 형태는 이후 결정된다. 스티칭 가능한 영역은 물체의 최종 분리된 이미지(25)를 얻기 위하여 2개의 사진(21, 23)으로부터 추출된다.

단계(203)에서, 제 1 및 제 3 사진(21, 23) 내에서 물체의 형태 및 위치에 기초하여, 제 2 사진(22)을 위한 노출이 행해진 동안 물체가 어디에 있었는지를 결정하기 위하여 선형 보간이 행해진다. 이러한 정보 및 물체의 형태에 기초하여, 제 2 사진(22) 내에서 노출된 영역이 결정된다. 노출된 영역은 점선으로 이미지(26) 내에 그려진다. 카메라가 물체와 정확하게 동일한 속도로 움직이는, 예컨대 사진사가 기차에서의 사람과 창문을 통해 보이는 움직이는 배경의 사진을 촬영하는 이상적인 경우, 제 1 및 제 3 사진 내에서 물체의 위치는 변하지 않는다. 그러나, 실제 물체의 위치 또한 적은 양만큼 변할 수 있어, 제 2 사진 내에서 물체의 표면에서 적은 양의 흐려짐을 야기한다.

단계(204)에서, 이미지(25)는 노출된 영역의 위치(이미지(26))에 따라 제 2 사진(22)의 상부에 오버레이되게 놓인다. 이것은 제 2 최종 이미지(27)를 초래하고, 이러한 최종 이미지에서 사진사가 예견하는 바와 같이, 물체는 완벽하게 모션 블러가 없고 (빠른 노출로 캡쳐되고), 반면에 배경은 움직임으로 흐릿한다(느린 노출로 챕쳐된다).

사진들(11, 12, 13 또는 21, 22, 23) 및 사진사의 의도(흐려짐이 없는 물체와 흐릿한 배경 또는 그 반대)에 의존하여, 2개의 최종 이미지들(20, 27) 중 오로지 하나가 성공적일 것이다, 즉 예상된 결과를 제공한다. 2개의 최종 이미지들(20, 27)의 생성 후, 사진사는 단순히 정확한 이미지를 선택할 것이다. 다른 사진은 제거될 수 있다.

도 2 및 도 3의 실시예의 변형에 따라, 사용자는 먼저 "유형 3 - 움직이는 물체, 정지 배경" 모션 블러 또는 "유형 4 - 정지 물체, 움직이는 배경" 모션 블러를 선택할 수 있는 인터페이스를 제공받고, 그 후 사용자의 선택에 따라 도 2의 방법 또는 도 3의 방법이 수행된다.

다른 변형에서, 도 2의 실시예의 방법은 동작으로 흐릿한 물체와 흐릿하지 않은 배경을 갖는 이미지(20)을 생성하기 위하여 사용될 수 있다. 이러한 이미지(20)의 상부에, 물체의 추가적인 선명한 이미지(또는 물체의 일부)가 겹쳐질 수 있다. 움직이는 물체의 선명한 이미지는 제 1 또는 제 3 이미지로부터 생성될 수 있다, 예컨대 단계(102)에서 유도될 수 있다.

도 4는 방법의 제 3 실시예를 도시한다. 제 3 실시예에서, 제 2 사진(42)은 제 1 및 제 3 사진(41, 43) 후에 촬영된다. 제 1 및 제 2 실시예에서와 같이, 제 1 및 제 3 사진(41, 43)은 짧은 노출 시간(T1, T3)으로 촬영되고, 반면에 제 2 사진(42)은 긴 노출 시간(T2)으로 촬영된다. 제 1 및 제 3 사진(41, 43)은 각각 시간(t1, t2)에 촬영된다. 물체 위에 제 1 사진(41) 및 제 3 사진(43)을 스티칭함으로써, 제 1 사진(41)에서의 물체와 제 3 사진(43)에서의 물체 사이의 거리가 계산될 수 있다. 시간 차이(t2-t1)와 계산된 거리를 사용하여, 물체의 평균 속도(v)가 계산될 수 있다. 평균 속도(v)를 사용하여, 제 2 사진을 촬영하기 위한 노출의 마지막 시간(t4)에 물체의 위치(P4)가 결정될 수 있다. 제 3 사진(43)과 제 2 사진(42) 사이의 시간 기간(ΔT)이 매우 작은 것으로 간주하면, 제 2 사진을 촬영하기 위한 노출의 시간(t3)에 물체의 위치(P3)는 제 3 사진(43)에서 물체의 위치와 동일한 것으로 간주할 수 있다. 본 발명의 이러한 실시예는, 물체가 시간(t1)과 시간(t4) 사이에서 거의 일정한 속도로 움직이는 한, 잘 적용될 것이다.

도 4의 실시예에서, 최종 이미지는 배경이 정적이고 물체가 움직이는 것으로 간주되는 상황에 대해 선택적인 단계(103)이 생략된 차이점을 갖고, 도 2에서와 같이 얻어질 수 있다. 확장된 배경 이미지(18)을 사용하는 대신, 제 3 사진(43)의 배경이 최종 이미지에 사용될 것이고, 이러한 최종 이미지에서 제 2 사진(42)으로부터 추출된 물체의 흐릿한 이미지(BP)는 제 3 사진(43) 위에 오버레이될 것이다.

제 3 실시예에서 물체 대신에 배경이 카메라에 대해 움직이고 있다면, 도 3의 실시예에 따라 계산된 최종 이미지는 양호한 결과를 제공할 것이다. 이러한 실시예에서, 물체가 카메라에 대해 크게 움직이지 않기 때문에, 물체의 속도를 계산하는 것은 생략될 수 있다. 제 2 실시예에 관해, 2가지 상술한 방법들이 병렬로 수행되어, 사용자에게 2개의 최종 이미지들을 제공할 수 있고, 이후 사용자는 자신의 선택으로 최종 이미지를 선택할 수 있다.

도 5는 제 4 실시예를 도시한다. 이러한 제 4 실시예는 번갈아 촬영된 5장의 사진들(51 - 55)의 한 장면을 사용한다. 제 1 사진은 짧은 노출 시간(T1)으로 촬영되고, 제 2 사진은 긴 노출 시간(T2)으로 촬영되고, 제 3 사진은 짧은 노출 시간(T3)으로 촬영되고, 제 4 사진은 긴 노출 시간(T4)으로 촬영되고, 제 5 사진은 짧은 노출 시간(T5)으로 촬영된다. 제 1, 제 2 및 제 3 사진들(51 - 53)에 기초하여, 도 1, 도 2 및 도 3과 관련하여 상술된 방법과 유사한 방식으로 제 1 중간 이미지(61)가 생성될 수 있다. 제 3, 제 4 및 제 5 사진들(53 - 55)은 또한 도 1, 도 2 및 도 3과 관련하여 상술된 방법과 유사한 방식으로 제 2 중간 이미지(62)를 생성하기 위하여 사용될 수 있다. 다음에, 중간 이미지들(61 및 62)이 결합되어 최종 이미지(63)를 생성할 수 있다. 이러한 실시예는 물체가 선형적으로 움직이지 않을 때 유용할 수 있다. 물체가 굴곡을 따라 움직인다면, 짧고 긴 셔터 노출 시간을 갖는 사진들의 한 장면을 사용함으로써, 굴곡은 일련의 선형 움직임들로 근사될 수 있다. 따라서, 물체의 더 복잡한 움직임들에 대해서도, 본 발명의 실시예는 개선된 방식으로 모션 블러를 포함하는 최종 이미지를 얻는 것을 허용한다.

도 6은 장치의 일 실시예를 도시한다. 장치(600)는 카메라(601), 제어기(602), 이미지 생성 모듈(603), 및 디스플레이 유닛(604)을 포함한다. 카메라(601)는 제어기(602)에 의해 제어되어 일련의 후속하는 사진들(I1, I2, I3)을 노출 시간들(T1, T2, T3)로 각각 촬영한다. T1 및 T3은 사진들(I1 및 I3)에서 실질적으로 모션 블러가 전혀 출현하지 않도록 선택된 짧은 노출 시간들이다. 노출 시간(T2)은 사진(I2)에서 동작으로 흐릿한 부분을 생성하기 위해 선택된 비교적 긴 노출 시간이다. 이미지 생성 모듈(603)은 제 1, 제 2 및 제 3 사진들(I1, I2, I3)을 사용하여 제 2 사진(I2)으로부터 적어도 일부의 흐릿한 부분 및 제 1 및/또는 제 3 사진(I1 및 I3)으로부터 유도된 일부를 포함하는 최종 이미지를 생성하도록 구성된다. 디스플레이 유닛(604)은 생성된 최종 이미지를 사용자에게 디스플레이하도록 구성된다. 이미지 생성 모듈(603)에 의해 최종 이미지를 생성하는 것은 위에서 개시된 방법의 실시예들 중 어느 하나에 따라 수행될 수 있다. 또한, 이미지 생성 모듈(603)은 위에서 개시된 방법의 상이한 실시예들에 따라 복수의 최종 이미지들을 생성하도록 구성될 수 있고, 이후 디스플레이 유닛은 복수의 최종 이미지들을 디스플레이하도록 구성될 수 있다. 또한, 장치는 사용자가 장치를 조작하는 것을 허용하도록 구성된 사용자 인터페이스(605)를 포함할 수 있다. 사용자 인터페이스 (605)는 사용자가 장치를 "모션 블러를 갖는 사진" 동작 모드로 설정하는 것을 허용하도록 구성될 수 있다. 사용자 인터페이스(605)는 장치가 "모션 블러를 갖는 사진" 동작 모드로 설정되었을 때 제어기(602)를 활성화시켜 제 1, 제 2 및 제 3 사진의 촬영을 제어하기 위한 버튼을 포함할 수 있다. 버튼은 예컨대 디스플레이 유닛(604)이 터치 스크린을 포함한다면 디스플레이 유닛(604) 상에 디스플레이된 가상 버튼, 또는 디지털 카메라의 버튼과 같은 물리적인 버튼일 수 있다.

예시적인 실시예들에 있어서, 장치(600)는 적절하게 구성된 스마트폰, 적절하게 구성된 디지털 카메라, 적어도 하나의 카메라를 갖는 적절하게 구성된 컴퓨터, 등일 수 있다. 완전성을 위하여, 제어기(602)가 별도의 실체로서 제공될 수 있거나, 또는 장치의 다른 구성요소들과 통합될 수 있음을 주목해야 한다. 유사하게, 이미지 생성 모듈(603)은 별도의 실체로서 제공될 수 있거나, 또는 장치의 다른 구성요소들과 통합될 수 있다.

도 7은 모션 블러를 갖는 일부를 포함하는 이미지를 얻기 위한 방법의 일 실시예를 도시한다. 제 1 단계(710)에서, 적어도 하나의 카메라는, 제 1 사진이 제 1 노출 시간(T1)으로, 제 2 사진이 제 2 노출 시간(T2)으로, 및 제 3 사진이 제 3 노출 시간(T3)으로 촬영되도록, 물체 및 배경의 제 1, 제 2 및 제 3 사진을 미리 결정된 순서로 제어되고, 상기 제 2 노출 시간은 상기 제 1 및 제 3 노출 시간보다 길어, 상기 물체 및/또는 배경이 상기 적어도 하나의 카메라에 대해 이동하고 있다면, 상기 제 2 사진은 배경 및/또는 물체의 동작으로 흐릿한 이미지를 포함하게 된다. 제 2 단계(720)에서, 제 2 사진의 상기 흐릿한 이미지의 적어도 일부와 함께 상기 제 1 및/또는 제 3 사진으로부터 유도된 일부를 포함하는 최종 이미지는 제 1, 제 2 및 제 3 사진을 사용하여 생성된다. 제어 단계(710)는 제 2 사진 이후 제 3 사진을, 그리고 제 1 사진 이후 제 2 사진을 촬영하도록 적어도 하나의 카메라를 제어하는 단계를 포함할 수 있다. 다른 실시예에 있어서, 제어 단계(710)는 제 2 이미지 이전에 제 1 및 제 3 이미지를, 또는 제 2 이미지 이후 제 1 및 제 3 이미지를 촬영하도록 적어도 하나의 카메라를 제어하는 단계를 포함할 수 있고; 제 1 및 제 3 이미지는 적어도 하나의 카메라에 대해 물체의 속도를 결정하기 위하여 사용될 수 있고; 속도는 제 2 사진 내의 동작으로 흐릿한 이미지의 위치를 결정하기 위하여 사용된다. 예시적인 실시예에 있어서, 제 1 및 제 3 노출 시간(T1, T3)은 1/100초보다 짧고, 제 2 노출 시간(T2)은 1/80초보다 길다.

도 8은 최종 이미지의 생성을 위해 수행될 수 있는 단계들의 예시적인 실시예를 상세하게 도시한다. 본 실시예에 있어서, 최종 이미지를 생성하기 위한 단계(820)는 제 1 및 제 3 사진(801, 803)을 사용하여 제 1 및 제 3 사진 내에서 물체의 형태 및 위치를 결정하기 위한 제 1 단계(821); 제 1 및 제 3 사진 내에서 물체의 형태 및 위치를 사용하여, 제 2 사진(802)으로부터 흐릿한 이미지의 적어도 일부를 분리하기 위한 제 2 단계(823); 및 최종 이미지를 얻기 위하여 흐릿한 이미지의 분리된 적어도 일부를 제 1 및 제 3 사진으로부터 유도된 일부와 결합하기 위한 제 3 단계(825)를 포함한다.

도 9는 최종 이미지의 생성을 위해 수행될 수 있는 단계들의 다른 예시적인 실시예를 상세하게 도시한다. 본 실시예에서, 최종 이미지를 생성하기 위한 단계(920)는

제 1 및 제 3 사진(901, 903)을 사용하여 제 1 및 제 3 사진 내에서 물체의 형태 및 위치를 결정하기 위한 제 1 단계(821); 제 1 및 제 3 사진 내에서 물체의 형태 및 위치를 사용하여, 제 2 사진(802)으로부터 흐릿한 이미지의 적어도 일부를 분리하기 위한 제 2 단계(823); 및 최종 이미지를 얻기 위하여 흐릿한 이미지의 분리된 적어도 일부를 제 1 및 제 3 사진으로부터 유도된 일부와 결합하기 위한 제 3 단계(825)를 포함한다.

도 9는 최종 이미지의 생성을 위해 사용될 수 있는 단계들의 다른 예시적인 실시예를 상세하게 도시한다. 본 실시예에 있어서, 최종 이미지를 생성하기 위한 단계(920)는 제 1 및 제 3 사진(901, 903)을 사용하여 물체에 기초한 스티칭을 사용하여 물체의 형태 및 위치를 결정하기 위한 제 1 단계(921); 제 1 및/또는 제 3 사진 내의 물체의 결정된 형태 및 위치를 사용하여 상기 제 1 및/또는 제 3 사진(901, 903)으로부터 배경 미지를 유도하기 위한 제 2 단계(922); 제 1 및/또는 제 3 사진 내의 결정된 위치를 사용하여 제 2 사진(902) 내에서 물체의 선택적으로 흐릿한 이미지의 위치를 결정하기 위한 단계(923); 및 최종 이미지를 얻기 위하여 제 2 사진 내에서 선택적으로 흐릿한 부분의 위치를 고려하면서 제 2 사진의 선택적으로 흐릿한 이미지를 상기 배경 이미지상에 오버레이하기 위한 최종 단계(925)를 포함한다.

도 10은 최종 이미지의 생성을 위해 수행될 수 있는 단계들의 다른 예시적인 실시예를 상세하게 도시한다. 본 실시예에 있어서, 최종 이미지를 생성하기 위한 단계(1020)는 제 1 및 제 3 사진(1001, 1003)을 사용하여 물체에 기초한 스티칭을 사용하여 물체의 형태 및 위치를 결정하기 위한 제 1 단계(1021); 결정된 형태 및 위치를 고려하면서 상기 제 1 및 상기 제 3 사진으로부터 물체를 제거함으로써 제 1 및 제 3 배경 이미지를 생성하기 위한 제 2 단계(1022); 결합된 배경 이미지를 얻기 위하여 상기 제 1 및 제 3 배경 이미지를 결합기 위한 제 2 단계(1024); 제 1 및 제 3 사진 내에서 결정된 위치를 사용하여 제 2 사진(1002) 내에서 물체의 선택적으로 흐릿한 이미지의 위치를 결정하기 위한 단계(1023); 및 최종 이미지를 얻기 위하여 제 2 사진 내에서 선택적으로 흐릿한 부분의 위치를 고려하면서 제 2 사진의 선택적으로 흐릿한 이미지를 상기 결합된 배경 이미지상에 오버레이하기 위한 최종 단계(1025)를 포함한다.

도 11은 최종 이미지의 생성을 위해 수행될 수 있는 단계들의 다른 예시적인 실시예를 상세하게 도시한다. 본 실시예에 있어서, 최종 이미지를 생성하기 위한 단계(1120)는 제 1 및 제 3 사진(1101, 1103)을 사용하여 물체에 기초한 스티칭을 사용하여 물체의 형태 및 위치를 생성하기 위한 제 1 단계(1121); 상기 제 1 및/또는 상기 제 3 사진으로부터 물체의 흐릿하지 않은 이미지를 유도하기 위한 제 2 단계(1122); 상기 제 1 및 상기 제 3 사진 내에서 결정된 위치를 사용하여 제 2 사진(1102) 내에서 물체의 선택적으로 흐릿한 이미지의 위치를 결정하기 위한 단계(1123); 및 최종 이미지를 얻기 위하여 제 2 사진 내에서 물체의 선택적으로 흐릿한 부분의 결정된 위치를 고려하면서 물체의 흐릿하지 않은 이미지를 제 2 사진 상에 오버레이하기 위한 최종 단계(1125)를 포함한다.

본 발명의 실시예들에 있어서, 2개의 최종 이미지들이 생성될 수 있다, 예컨대 정지 배경에 대해 움직이는 물체에 특히 적합한 도 9 또는 도 10의 실시예에 따른 제 1 최종 이미지, 및 움직이는 배경에 특히 적합한 도 11의 실시예에 따른 제 2 최종 이미지가 생성될 수 있다. 이후 사용자는 제 1 및 제 2 최종 이미지를 모두 제공받을 수 있고, 최상의 이미지를 선택할 수 있다. 다른 실시예에 있어서, 사용자는 "움직이는 물체" 모드 또는 "움직이는 배경" 모드를 선택하기 위한 선택 인터페이스를 제공받을 수 있고, 이에 의해 최종 이미지가 적절하게 계산된다. 따라서 도 6의 사용자 인터페이스(605)는 이러한 선택 인터페이스를 포함할 수 있다.

당업자는 다양한 상술한 방법들의 단계들이 프로그램된 컴퓨터들에 의해 수행될 수 있음을 쉽게 인식할 것이다. 본 명세서에서, 일부 실시예들은 또한 프로그램 저장 디바이스들, 예컨대 기계 또는 컴퓨터 판독 가능하고 명령들의 기계-실행 가능한 또는 컴퓨터-실행 가능한 프로그램들을 인코딩하는 디지털 데이터 저장 매체를 포함하고, 상기 명령들은 상기 상술한 방법들의 단계들의 일부 또는 전부를 수행하도록 의도된다. 프로그램 저장 디바이스들은 예컨대 디지털 메모리들, 자기 디스크들 및 자기 테이프들과 같은 자기 저장 매체, 하드 드라이브들, 또는 광학적으로 판독 가능한 디지털 데이터 저장 매체일 수 있다. 실시예들은 또한 상술한 방법들의 상기 단계들을 수행하도록 프로그램된 컴퓨터들을 포함하도록 의도된다.

"제어기들" 또는 "모듈들"로 라벨이 붙여진 임의의 기능 블록들을 포함하여 도면들에 도시된 다양한 요소들의 기능들은 전용 하드웨어와 함께 적절한 소프트웨어와 관련하여 소프트웨어를 실행할 수 있는 하드웨어의 사용을 통해 제공될 수 있다. 제어기 또는 프로세서에 의해 제공될 때, 기능들은 단일 전용 제어기에 의해, 단일 공유 제어기에 의해, 또는 일부가 공유될 수 있는 복수의 개별 제어기들에 의해 제공될 수 있다. 더욱이, 용어 "프로세서" 또는 "제어기"의 명시적인 사용은 소프트웨어를 실행할 수 있는 하드웨어를 배타적으로 언급하는 것으로 해석되지 않아야 하고, 제한 없이 암시적으로 디지털 신호 프로세서(DSP) 하드웨어, 네트워크 프로세서, 주문형 집적회로(ASIC), 필드 프로그램 가능한 게이트 어레이(FPGA), 소프트웨어를 저장하기 위한 판독 전용 메모리(ROM), 랜덤 액세스 메모리(RAM), 및 비휘발성 저장장치를 포함할 수 있다. 종래의 및/또는 맞춤형 다른 하드웨어가 포함도리 수 있다. 유사하게, 도면들에 도시된 임의의 스위치들은 단지 개념적이다. 그들의 기능은, 프로그램 로직의 동작을 통해, 전용 로직을 통해, 프로그램 제어 및 전용 로직의 상호작용을 통해, 또는 심지어 수동으로 수행될 수 있고, 특별한 기술은 문맥으로부터 더 구체적으로 이해되는 바와 같이 구현자들에 의해 선택 가능하다.

본 명세서의 임의의 블록도들이 본 발명의 원리들을 구현하는 예시적인 회로의 개념도를 표현한다는 것을 당업자들은 이해할 것이다. 유사하게, 임의의 플로우챠트들, 흐름도들, 상태 전이 도면들, 유사 코드, 등은 실질적으로 컴퓨터 판독 가능한 매체로 표현될 수 있고, 따라서 컴퓨터 또는 프로세서가 명시적으로 도시되었는지에 관계없이, 컴퓨터 또는 프로세서에 의해 실행될 수 있는 다양한 프로세서들을 나타낸다.

본 발명의 원리들은 특정 실시예들과 관련하여 위에서 설명되었지만, 이러한 설명은, 첨부된 청구항들에 의해 결정되는 보호 범주의 제한이 아닌, 예를 통해 단순히 설명되었음을 이해해야 한다.

Claims (18)

1. 모션 블러(motion blur)를 갖는 일부를 포함하는 이미지를 얻기 위한 방법에 있어서:
   물체 및 배경의 제 1, 제 2 및 제 3 사진을 결정된 순서로 촬영하도록 적어도 하나의 카메라를 제어하는 단계로서, 상기 제 1 사진은 제 1 노출 시간으로, 상기 제 2 사진은 제 2 노출 시간으로, 상기 제 3 사진은 제 3 노출 시간으로 촬영되고, 상기 제 2 노출 시간은 상기 제 1 및 상기 제 3 노출 시간보다 길고, 상기 물체 및/또는 상기 배경이 상기 적어도 하나의 카메라에 대해 움직이고 있다면, 상기 제 2 사진은 상기 배경 및/또는 상기 물체의 흐릿한 이미지를 포함하도록, 상기 적어도 하나의 카메라를 제어하는 단계;
   상기 제 1, 제 2 및 제 3 사진을 사용하여 최종 이미지를 생성하는 단계로서, 상기 생성된 최종 이미지는 상기 제 2 사진의 상기 흐릿한 이미지의 적어도 하나의 흐릿한 부분과 함께 상기 제 1 및/또는 제 3 사진으로부터 유도된 부분을 포함하는, 상기 최종 이미지를 생성하는 단계를 포함하는 것을 특징으로 하는, 이미지를 얻기 위한 방법.
2. 제 1 항에 있어서,
   상기 적어도 하나의 카메라를 제어하는 단계는, 상기 제 1, 제 2 및 제 3 사진들이 번갈아 촬영되도록, 상기 제 1, 제 2 및 제 3 사진을 촬영하기 위하여 단일 카메라를 제어하는 단계를 포함하는, 이미지를 얻기 위한 방법.
3. 제 1 항 또는 제 2 항에 있어서,
   상기 제 1 및 제 3 노출 시간은 1/100초보다 짧고, 상기 제 2 노출 시간은 1/80초보다 긴, 이미지를 얻기 위한 방법.
4. 컴퓨터 실행 가능한 명령들을 포함한 컴퓨터 프로그램이 저장된 컴퓨터 판독 가능한 저장 매체에 있어서,
   상기 컴퓨터 실행 가능한 명령들은, 상기 프로그램이 컴퓨터상에서 실행될 때, 제 1 항 또는 제 2 항의 방법을 수행하기 위한 것인, 컴퓨터 판독 가능한 저장 매체.
5. 물체 및 배경의 제 1, 제 2 및 제 3 사진을 결정된 순서로 촬영하도록 적어도 하나의 카메라를 제어하도록 구성된 제어기로서,
   상기 제 1 사진은 제 1 노출 시간으로, 상기 제 2 사진은 제 2 노출 시간으로, 및 상기 제 3 사진은 제 3 노출 시간으로 촬영되고, 상기 제 2 노출 시간은 상기 제 1 및 상기 제 3 노출 시간보다 길고, 상기 물체 및/또는 상기 배경이 상기 적어도 하나의 카메라에 대해 움직이고 있다면, 상기 제 2 사진은 상기 배경 및/또는 상기 물체의 흐릿한 이미지를 포함하는, 제어기.
6. 제 5 항에 있어서,
   상기 제어기는, 상기 제 1, 제 2 및 제 3 사진들이 번갈아 촬영되도록, 단일 카메라를 제어하여 상기 제 1, 제 2 및 제 3 사진을 촬영하도록 구성되는, 제어기.
7. 제 5 항 또는 제 6 항에 있어서,
   상기 제어기는, 1/100초보다 짧은 제 1 및 제 3 노출 시간으로 상기 제 1 및 제 3 사진을 촬영하고, 1/80초보다 긴 제 2 노출 시간으로 상기 제 2 사진을 촬영하기 위하여 상기 적어도 하나의 카메라를 제어하도록 구성되는, 제어기.
8. 제 5 항 또는 제 6 항에 있어서,
   상기 제어기는, 상기 제 2 사진 이후 상기 제 3 사진을 촬영하고, 상기 제 1 사진 이후 상기 제 2 사진을 촬영하도록 상기 적어도 하나의 카메라를 제어하도록 구성되는, 제어기.
9. 제 5 항 또는 제 6 항에 있어서,
   상기 제어기는, 상기 제 2 사진 이전에 상기 제 1 및 제 3 사진을, 또는 상기 제 2 사진 이후 상기 제 1 및 제 3 사진을 촬영하도록 상기 적어도 하나의 카메라를 제어하도록 구성되고,
   상기 제 1 및 제 3 이미지는 상기 적어도 하나의 카메라에 대해 상기 물체의 속도를 결정하기 위하여 사용되고,
   상기 속도는 상기 제 2 사진 내에서 상기 흐릿한 이미지의 위치를 결정하기 위하여 사용되는, 제어기.
10. 장치에 있어서:
    적어도 하나의 카메라; 및
    상기 적어도 하나의 카메라를 제어하기 위한 제 5 항 또는 제 6 항의 제어기를 포함하는, 장치.
11. 제 10 항에 있어서,
    상기 제 1, 제 2 및 제 3 사진을 사용하여 최종 이미지를 생성하도록 구성된 이미지 생성 모듈을 포함하고, 상기 생성된 최종 이미지는 상기 제 2 사진의 상기 흐릿한 이미지의 적어도 일부와 함께 상기 제 1 및/또는 제 3 사진으로부터 유도된 부분을 포함하는, 장치.
12. 제 11 항에 있어서,
    상기 이미지 생성 모듈은:
    상기 제 1 및 상기 제 3 사진 내에서 상기 물체의 형태 및 위치를 결정하기 위하여 상기 제 1 및 제 3 사진을 사용하고;
    상기 제 1 및 상기 제 3 사진 내에서 상기 물체의 상기 위치 및 형태를 사용하여 상기 제 2 사진으로부터 상기 흐릿한 이미지의 상기 적어도 하나의 흐릿한 부분을 분리하고;
    상기 최종 이미지를 얻기 위하여 상기 흐릿한 이미지의 상기 분리된 적어도 하나의 흐릿한 부분을 상기 제 1 및/또는 제 3 사진으로부터 유도된 부분과 결합함으로써, 상기 최종 이미지를 생성하도록 구성되는, 장치.
13. 제 11 항에 있어서,
    상기 이미지 생성 모듈은:
    상기 물체에 기초한 스티칭(stitching)을 사용하여 상기 물체의 형태 및 위치를 결정하기 위하여, 상기 제 1 및 상기 제 3 사진을 사용하고;
    상기 제 1 및/또는 제 3 사진 내에서 상기 물체의 상기 결정된 형태 및/또는 위치를 사용하여, 상기 제 1 및/또는 제 3 사진들로부터 배경 이미지를 유도하고;
    상기 제 2 사진 내에서 상기 물체의 선택적으로 흐릿한 이미지의 위치를 결정하기 위하여 상기 제 1 및 제 3 사진 내의 결정된 위치를 사용하고;
    상기 최종 이미지를 얻기 위하여, 상기 제 2 사진 내에서 상기 선택적으로 흐릿한 부분의 위치를 고려하면서 상기 제 2 사진의 상기 선택적으로 흐릿한 이미지를 상기 배경 이미지상에 오버레이함으로써, 상기 최종 이미지를 생성하도록 구성되는, 장치.
14. 제 11 항에 있어서,
    상기 이미지 생성 모듈은:
    상기 물체에 기초한 스티칭을 사용하여 상기 물체의 형태 및 위치를 결정하기 위하여 상기 제 1 및 상기 제 3 사진을 사용하고;
    제 1 및 제 3 배경 이미지를 생성하기 위하여 상기 결정된 형태 및 위치를 고려하면서 상기 제 1 및 상기 제 3 사진으로부터 물체를 제거하고;
    결합된 배경 이미지를 얻기 위하여 상기 제 1 및 제 3 배경 이미지를 결합하고;
    상기 제 2 사진 내에서 상기 물체의 선택적으로 흐릿한 이미지의 위치를 결정하기 위하여, 상기 제 1 및 제 3 사진 내에서 상기 결정된 위치를 사용하고;
    상기 최종 이미지를 얻기 위하여, 상기 제 2 사진 내에서 상기 선택적으로 흐릿한 부분의 위치를 고려하면서 상기 제 2 사진의 상기 선택적으로 흐릿한 이미지를 상기 결합된 배경 이미지상에 오버레이함으로써, 상기 최종 이미지를 생성하도록 구성되는, 장치
15. 제 11 항에 있어서,
    상기 이미지 생성 모듈은:
    상기 물체에 기초한 스티칭을 사용하여 상기 물체의 형태 및 위치를 결정하기 위하여 상기 제 1 및 상기 제 3 사진을 사용하고;
    상기 제 1 및/또는 제 3 사진으로부터 상기 물체의 흐릿하지 않은 이미지를 유도하고;
    상기 제 2 사진 내에서 상기 물체의 선택적으로 흐릿한 이미지의 위치를 결정하기 위하여 상기 제 1 및 제 3 사진 내의 상기 결정된 위치를 사용하고;
    상기 최종 이미지를 얻기 위하여, 상기 제 2 사진 내에서 상기 선택적으로 흐릿한 이미지의 상기 결정된 위치를 고려하면서 상기 물체의 상기 흐릿하지 않은 이미지를 상기 제 2 사진에 오버레이함으로써, 상기 최종 이미지를 생성하도록 구성되는, 장치.
16. 제 7 항에 있어서,
    상기 제어기는, 상기 제 2 사진 이후 상기 제 3 사진을 촬영하고, 상기 제 1 사진 이후 상기 제 2 사진을 촬영하도록 상기 적어도 하나의 카메라를 제어하도록 구성되는, 제어기.
17. 제 7 항에 있어서,
    상기 제어기는, 상기 제 2 사진 이전에 상기 제 1 및 제 3 사진을, 또는 상기 제 2 사진 이후 상기 제 1 및 제 3 사진을 촬영하도록 상기 적어도 하나의 카메라를 제어하도록 구성되고,
    상기 제 1 및 제 3 이미지는 상기 적어도 하나의 카메라에 대해 상기 물체의 속도를 결정하기 위하여 사용되고,
    상기 속도는 상기 제 2 사진 내에서 상기 흐릿한 이미지의 위치를 결정하기 위하여 사용되는, 제어기.
18. 제 8 항에 있어서,
    상기 제어기는, 상기 제 2 사진 이전에 상기 제 1 및 제 3 사진을, 또는 상기 제 2 사진 이후 상기 제 1 및 제 3 사진을 촬영하도록 상기 적어도 하나의 카메라를 제어하도록 구성되고,
    상기 제 1 및 제 3 이미지는 상기 적어도 하나의 카메라에 대해 상기 물체의 속도를 결정하기 위하여 사용되고,
    상기 속도는 상기 제 2 사진 내에서 상기 흐릿한 이미지의 위치를 결정하기 위하여 사용되는, 제어기.

Images