KR20090067913A

KR20090067913A - 영상 트리밍 장치 및 방법

Info

Publication number: KR20090067913A
Application number: KR1020070135737A
Authority: KR
Inventors: 김은영; 강민수
Original assignee: 삼성디지털이미징 주식회사
Priority date: 2007-12-21
Filing date: 2007-12-21
Publication date: 2009-06-25
Also published as: CN103369194A; US20090161961A1; CN101465940B; CN101465940A

Abstract

본 발명은 디지털 영상 처리 장치 및 방법에 관한 것으로, 보다 상세하게는 디스플레이된 영상으로부터 최적의 구도를 찾아 트리밍하는 영상 트리밍 장치 및 방법에 관한 것이다. 영상 트리밍 장치는 디지털 영상 처리 장치로서, 디스플레이된 영상의 구도정보와 유사한 구도정보를 검색하고, 상기 검색된 구도정보와 매치되는 상기 영상의 소정 영역을 트리밍하는 디지털 신호 처리수단을 포함한다.

구도정보 추출부, 구도정보 데이터베이스, 프레임 생성부, 트리밍부

Description

영상 트리밍 장치 및 방법{Apparatus and method for trimming image}

본 발명은 디지털 영상 처리 장치 및 방법에 관한 것으로, 보다 상세하게는 디스플레이된 영상으로부터 최적의 구도를 찾아 트리밍하는 영상 트리밍 장치 및 방법에 관한 것이다.

디지털 영상 처리 장치를 이용하여 영상을 촬영한 후, 재생 시에 구도가 마음에 들지 않을 경우, 직접 잘라내는 트리밍 기능을 실행할 수 있다. 트리밍 기능은 저장된 영상에서 사용자의 선택에 따라 영상의 일부를 다른 하나의 영상 파일로 저장 가능한 기능을 제공함으로써 영상의 일부만 필요한 경우 또는 영상의 일부를 확대하여 따로 저장하는 경우에 주로 사용된다.

그러나, 디지털 영상 처리 장치 상에서 직접 최적의 구도를 제공해 주지 않는다. 구도를 잘 잡는 것은 전문가가 아닌 일반 사용자에게는 어려운 일이고, 사용자가 이미 촬영한 영상에 대한 구도를 편집 기능을 이용하여 변경하는 것은 가능하지만, 직접 변경하는 것으로 그 변경한 영상 자체도 구도가 최적화 되어 있지 않을 수도 있다.

본 발명이 해결하고자 하는 기술적인 과제는 최적의 구도정보가 저장된 데이터베이스를 구축하고, 디스플레이된 영상의 구도와 가장 유사한 최적의 구도정보를 검색하여, 최적의 구도정보를 토대로 디스플레이된 영상을 트리밍하는 영상 트리밍 장치 및 방법을 제공하는데 있다.

본 발명이 해결하고자 하는 기술적인 과제를 해결하기 위한 제1 실시 예에 따른 영상 트리밍 장치는 디지털 영상 처리 장치로서, 디스플레이된 영상의 구도정보와 유사한 구도정보를 검색하고, 상기 검색된 구도정보와 매치되는 상기 영상의 소정 영역을 트리밍하는 디지털 신호 처리수단을 포함하는 것이 바람직하다.

본 발명에 있어서, 상기 디스플레이된 영상은 라이브뷰 영상이거나 임의의 저장 영상일 수 있다.

본 발명에 있어서, 상기 디지털 신호 처리수단은 상기 트리밍된 영상과 상기 영상을 동시에 디스플레이 할 수 있다.

본 발명에 있어서, 상기 디지털 신호 처리수단은 상기 영상으로부터 구도정보를 추출하는 구도정보 추출부; 임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스; 상기 구도정보 데이터베이스로부터 상기 추출된 영상의 구도정보와 가장 유사한 구도정보를 검색하는 검색부; 상기 검색된 구도정보와 매치되는 상기 영상의 소정 영역을 프레임으로 표시하는 프레임 생성부; 및 상기 생성된 프레임을 트리밍하는 트리밍부를 포함할 수 있다.

본 발명에 있어서, 상기 구도정보 추출부는 상기 영상이 인물 영상인 경우, 얼굴인식을 통하여 구도 정보를 추출할 수 있다.

본 발명에 있어서, 상기 구도정보 추출부는 상기 영상이 배경 영상인 경우, 에지검출을 통하여 구도정보를 추출할 수 있다.

본 발명에 있어서, 상기 구도정보 추출부에서 추출된 구도정보 및/또는 상기 구도정보 데이터베이스로부터 검색된 구도정보는 상기 라이브뷰 영상의 일부분에 표시될 수 있다.

본 발명이 해결하고자 하는 기술적인 과제를 해결하기 위한 제2 실시 예에 따른 영상 트리밍 장치는 디지털 영상 처리 장치로서, 제1 셔터-릴리즈 버튼 입력에 의해 라이브뷰 영상으로부터 구도정보를 추출하는 구도정보 추출부; 임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스; 상기 구도정보 데이터베이스로부터 상기 추출된 라이브뷰 영상의 구도정보와 가장 유사한 구도정보를 검색하는 검색부; 상기 검색된 구도정보와 매치되는 상기 라이브뷰 영상의 소정 영역을 프레임으로 표시하는 프레임 생성부; 및 제2 셔터-릴리즈 버튼이 입력되면 상기 생성된 프레임을 트리밍하는 트리밍부를 포함하는 것이 바람직하다.

본 발명이 해결하고자 하는 기술적인 과제를 해결하기 위한 제3 실시 예에 따른 영상 트리밍 장치는 디지털 영상 처리 장치로서, 제1 셔터-릴리즈 버튼 입력에 의해 임의의 재생 영상으로부터 구도정보를 추출하는 구도정보 추출부; 임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스; 상기 구도정보 데 이터베이스로부터 상기 추출된 재생 영상의 구도정보와 가장 유사한 구도정보를 검색하는 검색부; 상기 검색된 구도정보와 매치되는 상기 재생 영상의 소정 영역을 프레임으로 표시하는 프레임 생성부; 및 제2 셔터-릴리즈 버튼이 입력되면 상기 생성된 프레임을 트리밍하는 트리밍부를 포함하는 것이 바람직하다.

본 발명이 해결하고자 하는 기술적인 과제를 해결하기 위한 제1 실시 예에 따른 영상 트리밍 방법은 디지털 영상 처리 장치의 동작 방법으로서, (a) 영상의 구도정보와 유사한 구도정보를 검색하는 단계; 및 (b) 상기 검색된 구도정보와 매치되는 상기 영상의 소정 영역을 트리밍하는 단계를 포함하는 것이 바람직하다.

본 발명에 있어서, (c) 상기 트리밍된 영상과 상기 영상을 동시에 디스플레이 하는 단계를 더 포함할 수 있다.

본 발명에 있어서, 상기 영상은 라이브뷰 영상이거나 임의의 저장 영상일 수 있다.

본 발명에 있어서, 상기 (a) 단계는 (a-1) 상기 영상으로부터 구도정보를 추출하는 단계; (a-2) 임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스로부터 상기 추출된 영상의 구도정보와 가장 유사한 구도정보를 검색하는 단계를 포함할 수 있다.

본 발명에 있어서, 상기 추출된 구도정보 및/또는 상기 구도정보 데이터베이스로부터 검색된 구도정보는 상기 라이브뷰 영상의 일부분에 표시될 수 있다.

본 발명에 있어서, 상기 (a)단계에서 구도정보 추출 시에, 상기 영상이 인물 영상인 경우, 얼굴인식을 통하여 구도 정보를 추출하고, 상기 영상이 배경 영상인 경우, 에지검출을 통하여 구도정보를 추출할 수 있다.

본 발명에 있어서, 상기 (b) 단계는 (b-1) 상기 검색된 구도정보와 매치되는 상기 라이브뷰 영상의 소정 영역을 프레임으로 표시하는 단계; 및 (b-2) 상기 생성된 프레임을 트리밍하는 단계를 포함할 수 있다.

본 발명이 해결하고자 하는 기술적인 과제를 해결하기 위한 제2 실시 예에 따른 영상 트리밍 방법은 디지털 영상 처리 장치의 동작 방법으로서, (a) 제1 셔터-릴리즈 버튼 입력에 의해 라이브뷰 영상으로부터 구도정보를 추출하는 단계; (b) 임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스로부터 상기 추출된 라이브뷰 영상의 구도정보와 가장 유사한 구도정보를 검색하는 단계; (c) 상기 검색된 구도정보와 매치되는 상기 라이브뷰 영상의 소정 영역을 프레임으로 표시하는 단계; 및 (d) 제2 셔터-릴리즈 버튼이 입력되면 상기 생성된 프레임을 트리밍하는 단계를 포함하는 것이 바람직하다.

본 발명이 해결하고자 하는 기술적인 과제를 해결하기 위한 제3 실시 예에 따른 영상 트리밍 방법은 디지털 영상 처리 장치의 동작 방법으로서, (a) 제1 셔터-릴리즈 버튼 입력에 의해 임의의 재생 영상으로부터 구도정보를 추출하는 단계; (b) 임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스로부터 상기 추출된 재생 영상의 구도정보와 가장 유사한 구도정보를 검색하는 단계; (c) 상기 검색된 구도정보와 매치되는 상기 재생 영상의 소정 영역을 프레임으로 표시하는 단계; 및 (d) 제2 셔터-릴리즈 버튼이 입력되면 상기 생성된 프레임을 트리밍하는 단계를 포함하는 것이 바람직하다.

본 발명에 따르면, 데이터베이스로부터 디스플레이된 영상의 구도와 가장 유사한 최적의 구도정보를 검색하여, 최적의 구도정보를 토대로 디스플레이된 영상을 트리밍함으로써, 최적의 구도를 갖는 영상을 촬영할 수 있어, 사용자의 만족도를 극대화 할 수 있다.

이하, 첨부된 도면을 참좀하여 본 발명을 상세히 설명한다.

도 1은 디지털 영상 처리 장치의 앞쪽 및 위쪽 외형을 보여주는 사시도 이다.

셔터-릴리즈 버튼(11)은 정해진 시간 동안 CCD나 필름을 빛에 노출시키기 위해 열리고 닫히며, 조리개(미도시)와 연동하여 피사체를 적정하게 노출시켜 CCD에 영상을 기록한다.

셔터-릴리즈 버튼(11)은 촬영자 입력에 의해 제1 및 제2 영상 촬영 신호를 생성한다. 반셔터 신호로써의 제1 셔터-릴리즈 버튼(11)이 입력되면, 디지털 영상 처리 장치는 초점을 잡고 빛의 양을 조절하며, 이때 초점이 맞은 경우 디스플레이부(25)에 녹색 불이 켜지게 된다. 제1 셔터-릴리즈 버튼(11)의 입력으로 초점이 잡히고 빛의 양이 조절되면, 비로소 완전셔터 신호로써의 제2 셔터-릴리즈 버튼(11)을 입력하여 영상을 촬영한다.

전원 버튼(13)은 디지털 영상 처리 장치에 전원을 공급하여 동작시키기 위해 입력된다.

플래시(15)는 어두운 곳에서 촬영할 경우 밝은 빛을 순간적으로 비추어 밝게 해주는 것으로 플래시 모드에는 자동플래시, 강제발광, 발광금지, 적목감소, 슬로우 싱크로 등이 있다.

보조광(17)은 광량이 부족하거나 야간 촬영 시에 디지털 영상 처리 장치가 자동으로 초점을 빠르고 정확하게 잡을 수 있도록 피사체에 광을 공급한다.

렌즈부(19)는 외부 광원으로부터 빛을 받아 영상을 처리한다.

도 2는 도 1에 도시된 디지털 영상 처리 장치의 뒤쪽 외형을 보여주는 배면도로서, 광각-줌 버튼(21w), 망원-줌 버튼(21t), 디스플레이부(23) 및 터치센서 또는 접점식 스위치가 구비된 입력 버튼들(B1~B14)(이하 버튼들(B1~B14)이라 표기함)을 구비한다.

광각-줌 버튼(21w) 또는 망원-줌 버튼(21t)은 입력에 따라 화각이 넓어지거나, 화각이 좁아지는데, 특히, 선택된 노출영역의 크기를 변경시키고자 할 때 입력한다. 광각-줌 버튼(21w)이 입력되면, 선택된 노출영역의 크기가 작아지고, 망원-줌 버튼(21t)이 입력되면, 선택된 노출영역의 크기가 커진다.

버튼들(B1~B14)은 디스플레이부(23)의 가로 열 및 세로 열에 구비된다. 디스플레이부(23)의 가로 열 및 세로 열에 구비된 버튼들(B1~B14)은 터치 센서(도시되지 않음) 또는 접점식 스위치(도시되지 않음)가 구비되어 있다.

즉, 버튼들(B1~B14)에는 터치 센서가 구비되어 가로 열의 버튼들(B1~B7) 또는 세로 열의 버튼들(B8~B14)을 터치한 상태에서 상/하/좌/우로 이동하여 주 메뉴 항목 중 임의의 값(예를 들어, 컬러 또는 밝기)을 선택하거나, 주 메뉴 아이콘에 포함된 하위메뉴 아이콘을 활성화 시킬 수 있다.

또한 버튼틀(B1~B14)에는 접점식 스위치가 구비되어 있어, 주 메뉴 아이콘 및 하위메뉴 아이콘을 직접 선택하여 해당 기능을 실행시킬 수 있다. 터치 센서는 접점식 스위치 입력에 비해 상대적으로 약한 터치만을 요구하지만, 접점식 스위치 입력은 터치 센서 입력에 비해 상대적으로 강한 터치를 요구한다.

도 3은 영상 트리밍 장치의 구성을 보이는 블록도로서, 디스플레이부(23), 사용자 입력부(31), 촬상부(33), 영상 처리부(35), 저장부(37) 및 디지털 신호 처리부(39)를 포함한다.

사용자 입력부(31)는 정해진 시간 동안 CCD나 필름을 빛에 노출시키기 위해 열리고 닫히는 셔터 릴리즈 버튼(11), 전원을 공급하기 위해 입력하는 전원 버튼(13), 입력에 따라 화각을 넓어지게 하거나, 화각을 좁아지게 하는 광각-줌 버튼(21w) 및 망원-줌 버튼(21t)과, 문자 입력 또는 메뉴 선택 및 실행을 위해 위해 디스플레이부(23) 주변의 가로 및 세로열에 구비된 터치센서 또는 접점식 스위치가 구비된 버튼들 버튼틀(B1~B14)이 있다.

촬상부(33)는 도면에 도시되지 않은 셔터, 렌즈부, 조리개 및 CCD(Charge Coupled Device) 및 ADC를 포함한다. 셔터는 조리개와 함께 노광하는 빛의 양을 조절하는 기구이다. 렌즈부는 외부 광원으로부터 빛을 받아 영상을 처리한다. 이 때, 조리개는 개폐 정도에 따라 입사되는 빛의 양(광량)을 조절한다. 조리개의 개폐 정도는 디지털 신호 처리부(39)에 의해 제어된다.

CCD는 렌즈부를 통하여 입력되는 광량을 축적하고 그 축적된 광량에 따라 렌 즈부에서 촬상된 영상을 수직 동기신호에 맞추어 출력한다. 디지털 영상 처리 장치의 영상 획득은 피사체로부터 반사되어 나오는 빛을 전기적인 신호로 변환시켜 주는 CCD에 의해 이루어진다. CCD를 이용하여 컬러 영상을 얻기 위해서는 컬러 필터를 필요로 하며, 대부분 CFA(Color filter array) 라는 필터(미도시)를 채용하고 있다. CFA는 한 픽셀마다 한 가지 컬러를 나타내는 빛만을 통과시키며 규칙적으로 배열된 구조를 가지고 있으며, 배열 구조에 따라 여러 가지 형태를 가지고 있다. ADC는 CCD로부터 출력되는 아날로그 영상신호를 디지털 신호로 변환한다.

영상 처리부(35)는 디지털 변환된 RAW 데이터를 디스플레이 가능하도록 신호처리 한다. 영상 처리부(35)는 온도변화에 만감한 CCD 및 CFA 필터에서 발생하는 암 전류에 의한 블랙레벨(Black level)을 제거한다. 영상 처리부(35)는 인간 시각의 비선형성에 맞추어 정보를 부호화 하는 감마 보정을 수행한다. 영상 처리부(35)는 감마 보정된 소정 데이터의 RGRG라인 및 GBGB 라인으로 구현된 베이어 패턴을 RGB 라인으로 보간하는 CFA 보간을 수행한다. 영상 처리부(35)는 보간된 RGB 신호를 YUV 신호로 변환하고, 고 대역 필터에 의해 Y 신호를 필터링 하여 영상을 뚜렷하게 처리하는 에지 보상과, 표준 컬러 좌표계를 이용하여 U, V 신호의 컬러 값을 정정하는 컬러 정정을 수행하며, 이들의 노이즈를 제거한다. 영상 처리부(35)는 노이즈가 제거된 Y, U, V 신호를 압축 및 신호 처리하여 JPEG 파일을 생성하고, 생성된 JPEG 파일은 디스플레이부(23)에 디스플레이 되고, 저장부(37)에 저장된다. 이와 같은 영상 처리부(35)의 모든 동작은 디지털 신호 처리부(39)의 제어 하에 동작한다.

디지털 신호 처리부(39)는 디스플레이된 영상의 구도정보와 유사한 최적의 구도정보를 검색하고, 상기 검색된 최적의 구도정보와 매치되는 상기 영상의 소정 영역을 트리밍한다. 여기서, 디스플레이된 영상은 라이브뷰 영상이거나, 저장부(37)에 저장된 임의의 영상일 수 있다.

영상 트리밍을 제어하는 디지털 신호 처리부(39)는 구도정보 추출부(39-1), 구도정보 데이터베이스(39-2), 검색부(39-3), 프레임 생성부(39-4), 트리밍부(39-5) 및 제어부(39-6)를 포함한다.

구도정보 추출부(39-1)는 제어부(39-6)의 제어 하에, 디스플레이된 라이브뷰 영상 또는 저장부(37)로부터 선택되어 디스플레이부(23)에 재생되는 영상의 구도정보를 추출한다. 구도정보 추출부(39-1)는 디스플레이된 영상이 인물영상인 경우, 얼굴인식을 통하여 구도정보를 추출하고, 디스플레이된 영상이 배경영상인 경우, 에지검출을 통하여 구도정보를 추출한다.

도 4a에 도시된 바와 같이 디스플레이된 영상이 인물영상(도 4(a-1))인 경우, 구도정보 추출부(39-1)는 영상에 얼굴인식 알고리즘을 적용하여 구도정보를 추출한다. 구도정보 추출부(39-1)는 디스플레이된 영상에 대한 얼굴의 크기, 위치 및 방향을 검출하는데, 얼굴의 크기 검출 시에, 컬러를 기반으로 얼굴 영역을 검출하거나, 에지를 기반으로 얼굴 영역을 검출할 수 있고, 얼굴의 위치 검출 시에, 추출된 얼굴의 중심부와 미리 설정되어 있는 디스플레이부(23) 중심부 사이의 거리로 얼굴 위치를 계산할 수 있으며, 얼굴의 방향 검출 시에, 추출된 얼굴로부터 눈과 입으로 구성된 삼각형 형태로 얼굴 방향을 검출할 수 있다. 이와 얼굴인식 알고리 즘에 대한 내용은 이미 공지된 내용이 많으므로 상세한 설명은 생략한다. 도 4 (a-1)의 인물영상에 대한 얼굴인식 결과가 도 4 (a-2)에 도시되어 있고, 구도정보 추출부(39-1)는 도 4 (a-3)과 같은 구도정보를 추출한다.

도 4b에 도시된 바와 같이 디스플레이된 영상이 배경영상(도 4(b-1))인 경우, 구도정보 추출부(39-1)는 영상의 에지검출을 통하여 구도정보를 추출한다. 구도정보 추출부(39-1)는 디스플레이된 영상에 고주파 통과 필터를 적용하여 에지를 추출할 수 있다. 도 4 (b-1)의 배경영상에 대한 에지추출 결과가 도 4 (b-2)에 도시되어 있고, 구도정보 추출부(39-1)는 도 4 (b-3)과 같은 구도정보를 추출한다.

구도정보 추출부(39-1)가 검출한 구도정보는 도 4 (a-3) 또는 (b-3)과 같이 디스플레이된 영상과 함께 표시될 수도 있고, 예를 들어 도 6에 도시된 바와 같이 디스플레이된 영상의 일부분에 또 다른 화면으로 작게 표시될 수도 잇다.

구도정보 데이터베이스(39-2)는 임의의 영상들에 대한 최적 구도정보가 저장되어 있다. 도 5에 도시된 바와 같이, 구도정보 데이터베이스(39-2)에 저장된 구도정보는 현재 디스플레이부(23)에 디스플레이된 영상의 구도정보를 보정해 줄 수 있는 여러가지 최적의 구도정보들이 저장되어 있다.

검색부(39-3)는 제어부(39-6)의 제어 하에, 구도정보 데이터베이스(39-2)로부터 구도정보 추출부(39-1)가 추출한 구도정보와 가장 유사한 최적의 구도정보를 검색한다. 검색부(39-3)가 검색한 최적의 구도정보는 도 6 디스플레이된 영상의 일부에 표시될 수도 있고, 또는 구도정보 추출부(39-1)가 추출한 구도정보 및 구도정보 데이터베이스(39-2)로부터 검색된 최적의 구도정보가 동시에 표시 될 수도 있 다.

프레임 생성부(39-4)는 제어부(39-6)의 제어 하에, 검색부(39-3)가 검색한 최적의 구도정보와 매치되는 영상의 소정 영역을 프레임으로 표시한다. 도 7에는 검색부(39-3)가 검색한 최적의 구도정보를 디스플레이된 영상에 적용하여 프레임으로 표시한 것을 보여준다.

트리밍부(39-5)는 제어부(39-6)의 제어 하에, 프레임 생성부(39-4)가 생성한 프레임을 트리밍한다. 도 8에는 최적의 구도정보를 프레임으로 표시한 영상을 트리밍한 결과를 보여준다.

본 발명에서, 트리밍부(39-5)가 트리밍한 영상과 디스플레이된 영상은 각각 저장될 수 있다. 예를 들어, 디스플레이된 영상이 라이브뷰 영상일 경우, 제1 셔터-릴리즈 버튼(11)을 입력하면 라이브뷰 영상의 구도정보를 추출하고, 구도정보 데이터베이스(39-2)로부터 추출된 구도정보와 가장 유사한 구도정보를 추출하여 프레임을 생성한 후, 제2 셔터-릴리즈 버튼(12)을 입력하면 생성된 프레임을 트리밍하여 저장함과 동시에 트리밍되지 않은 원래의 라이브뷰 영상을 캡쳐하여 저장한다. 이후, 사용자의 선택에 의해 트리밍된 영상과 트리밍되지 않은 영상을 동시에 디스플레이하여 비교할 수 있다.

또한 디스플레이된 영상이 저장부(37)에 저장된 임의의 영상인 경우에는 해당 기능이 설정된 임의의 버튼들(B1~B14)을 이용하여 재생 영상의 구도정보를 추출하고, 구도정보 데이터베이스(39-2)로부터 추출된 구도정보와 가장 유사한 구도정보를 추출하여 프레임을 생성한 후, 생성된 프레임을 트리밍하여 따로 저장한다. 이때 이전의 재생 영상을 삭제하지 않는다. 이후, 사용자의 선택에 의해 트리밍된 영상과 트리밍되지 않은 영상을 동시에 디스플레이하여 비교할 수 있다.

다른 실시 예로, 디지털 영상 처리 장치에서 특정 구도선택 모드를 제공하여, 영상이 디스플레이되면, 그 모드에서는 자동으로 구도를 선택하고, 프레임을 생성하며, 생성된 프레임을 기준으로 트리밍하는 기능을 제공할 수 있다.

또한 구도정보 데이터베이스(39-2)에서는 추출된 구도정보와 가장 유사한 최적의 구도정보 하나만을 제공하는 것이 아니라, 비슷한 최적의 구도 정보를 여러 개 제공하고, 사용자가 선택할 수 있도록 할 수 있다.

그리고, 한 개의 영상에 대해 트리밍을 한 개만 하는게 아니라, 한 개의 영상에 대해 구도정보 데이터베이스(39-2)에서 찾은 최적의 구도가 N개가 있다고 할 때, N개의 영상을 만들어 여러 방식으로 트리밍할 수 있다. 즉, 동일한 영상을 여러 방식으로 트리밍하여 저장할 수 있다.

이하, 도 9 및 도 10을 참조하여 본 발명에 따른 영상 트리밍 방법을 상세히 설명한다. 본 발명에 따른 영상 트리밍 방법은 도 3에 도시된 바와 같은 디지털 영상 처리장치의 내부에서 수행될 수 있는데, 실시 예에 따라 동작 방법의 주 알고리즘은 장치 내의 주변 구성 요소들의 도움을 받아 디지털 신호 처리부(39) 내부에서 수행될 수 있다.

도 9는 본 발명의 제1 실시 예에 따른 영상 트리밍 방법의 동작을 보이는 흐름도로서, 라이브뷰 영상에 대한 트리밍 방법을 보여준다.

사용자가 디지털 영상 처리 장치를 동작시켜 촬영 모드를 선택하면, 디스플 레이부(23)에 디스플레이된 라이브뷰 영상을 보면서 촬영 구도를 잡고 제1 셔터-릴리즈 버튼(11)을 입력한다(901단계).

제1 셔터-릴리즈 버튼(11)의 입력을 수신한 디지털 신호 처리부(39)는 라이브뷰 영상으로부터 구도정보를 추출한다(903단계). 디지털 신호 처리부(39)는 도 4a에 도시된 바와 같이 디스플레이된 영상이 인물영상인 경우 얼굴인식을 통하여 구도정보를 추출하고, 도 4b에 도시된 바와 같이 디스플레이된 영상이 배경영상인 경우, 에지검출을 통하여 구도정보를 추출한다.

디지털 신호 처리부(39)는 추출된 구도정보를 라이브뷰 영상의 일부분에 표시한다(905단계). 디지털 신호 처리부(39)는 검출한 구도정보를 도 4 (a-3) 또는 (b-3)과 같이 디스플레이된 영상과 함께 표시할 수 있고, 도 6에 도시된 바와 같이 디스플레이된 영상의 일부분에 또 다른 화면으로 작게 표시할 수 있다.

이어서, 디지털 신호 처리부(39)는 내부의 구도정보 데이터베이스(39-2)로부터 현재 라이브뷰 영상의 구도정보와 가장 유사한 구도정보를 검색한다(907단계). 도 5에 도시된 바와 같이, 구도정보 데이터베이스(39-2)에는 현재 라이브뷰 영상의 구도정보를 보정해 줄 수 있는 여러가지 최적의 구도정보들이 저장되어 있다.

디지털 신호 처리부(39)는 현재 라이브뷰 영상에 구도정보 데이터베이스(39-2)로부터 검색한 구도정보와 매치되는 영역을 프레임으로 표시한다(909단계). 도 7에는 디지털 신호 처리부(39)가 검색한 최적의 구도정보를 디스플레이된 영상에 적용하여 프레임으로 표시한 것을 보여준다.

이어서, 디지털 신호 처리부(39)는 제2 셔터-릴리즈 버튼(11) 입력이 수신되 었는지 판단한다(911단계).

제2 셔터-릴리즈 버튼(11)이 입력된 경우, 본 발명은 두 가지의 경우로 나누어서 설명할 수 있다. 첫 번째, 제2 셔터-릴리즈 버튼(11) 입력이 수신되면, 디지털 신호 처리부(39)는 프레임으로 표시된 영상을 트리밍하여 저장하는 것이다. 도 8에는 최적의 구도정보를 프레임으로 표시한 영상을 트리밍한 결과를 보여준다.

두 번째는 다음 913단계 내지 917단계를 통하여 설명한다.

제2 셔터-릴리즈 버튼(11) 입력이 수신되면, 디지털 신호 처리부(39)는 제1 셔터-릴리즈 버튼(11) 입력 시의 라이브뷰 영상을 저장함과 동시에 프레임으로 표시된 영상을 트리밍하여 저장한다(913단계).

이어서, 트리밍된 영상과 저장된 라이브뷰 영상을 비교하고자 하는 경우(915단계), 트리밍된 영상과 라이브뷰 영상을 동시에 디스플레이부(23)에 디스플레이한다(917단계).

다른 실시 예로, 구도정보 데이터베이스(39-2)에서는 추출된 구도정보와 가장 유사한 최적의 구도정보 하나만을 제공하는 것이 아니라, 비슷한 최적의 구도 정보를 여러 개 제공하고, 사용자가 선택할 수 있도록 할 수 있다.

도 10은 본 발명의 제2 실시 예에 따른 영상 트리밍 방법의 동작을 보이는 흐름도로서, 저장부(37)으로부터 선택한 임의의 재생 영상에 대한 트리밍 방법을 보여준다.

사용자가 디지털 영상 처리 장치를 동작시켜 재생 모드를 선택하면, 디스플레이부(23)에는 선택된 저장 영상이 재생된다(1001단계).

선택된 영상이 재생되면, 디지털 신호 처리부(39)는 재생 영상으로부터 구도정보를 추출한다(1003단계). 디지털 신호 처리부(39)는 도 4a에 도시된 바와 같이 디스플레이된 영상이 인물영상인 경우 얼굴인식을 통하여 구도정보를 추출하고, 도 4b에 도시된 바와 같이 디스플레이된 영상이 배경영상인 경우, 에지검출을 통하여 구도정보를 추출한다.

디지털 신호 처리부(39)는 추출된 구도정보를 재생 영상의 일부분에 표시한다(1005단계). 디지털 신호 처리부(39)는 검출한 구도정보를 도 4 (a-3) 또는 (b-3)과 같이 디스플레이된 영상과 함께 표시할 수 있고, 도 6에 도시된 바와 같이 디스플레이된 영상의 일부분에 또 다른 화면으로 작게 표시할 수 있다.

이어서, 디지털 신호 처리부(39)는 내부의 구도정보 데이터베이스(39-2)로부터 현재 재생 영상의 구도정보와 가장 유사한 구도정보를 검색한다(1007단계). 도 5에 도시된 바와 같이, 구도정보 데이터베이스(39-2)에는 현재 재생 영상의 구도정보를 보정해 줄 수 있는 여러가지 최적의 구도정보들이 저장되어 있다.

디지털 신호 처리부(39)는 현재 재생 영상에 구도정보 데이터베이스(39-2)로부터 검색한 구도정보와 매치되는 영역을 프레임으로 표시한다(1009단계). 도 7에는 디지털 신호 처리부(39)가 검색한 최적의 구도정보를 디스플레이된 영상에 적용 하여 프레임으로 표시한 것을 보여준다.

이어서, 디지털 신호 처리부(39)는 예를 들어, 트리밍 기능이 설정된 임의의 버튼들(B1~B14) 또는 셔터-릴리즈 버튼(11)의 입력을 수신하고(1011단계), 프레임으로 표시된 영역만을 트리밍하여 저장한다(1013단계). 이때, 트리밍된 영상은 재생 영상과 별도로 저장된다. 즉, 재생 영상은 삭제되지 않는다. 그러나 사용자의 선택에 의해 재생 영상은 삭제될 수 있다. 도 8에는 최적의 구도정보를 프레임으로 표시한 영상을 트리밍한 결과를 보여준다.

본 발명은 상기 1013 단계에서 종료되는 첫 번재 경우와, 다음 1015단계 및 1017단계를 더 추가하는 두 번째 경우로 나눌 수 있다.

트리밍된 영상과 저장된 재생 영상을 비교하고자 하는 경우(1015단계), 트리밍된 영상과 라이브뷰 영상을 동시에 디스플레이부(23)에 디스플레이한다(1017단계).

도 2는 도 1에 도시된 디지털 영상 처리 장치의 뒤쪽 외형을 보여주는 배면도 이다.

도 3은 본 발명에 따른 영상 트리밍 장치의 구성을 보이는 블록도 이다.

도 4는 도 3의 장치 중 구도정보 추출부를 설명하기 위한 도면이다.

도 5는 도 3의 장치 중 구도정보 데이터베이스에 저장된 최적 구도정보들을 보이는 도면이다.

도 6은 도 3의 장치에서 검출된 구도정보를 영상의 일부분에 표시한 도면이다.

도 7은 도 3의 장치에서 최적 구도정보와 매치되는 영상의 영역을 프레임으로 표시한 도면이다.

도 8은 도 3의 장치에서 프레임으로 표시된 영상을 트리밍한 도면이다.

도 9는 본 발명의 제1 실시 예에 따른 영상 트리밍 방법의 동작을 보이는 흐름도 이다.

도 10은 본 발명의 제2 실시 예에 따른 영상 트리밍 방법의 동작을 보이는 흐름도 이다.

Claims

디지털 영상 처리 장치로서,

디스플레이된 영상의 구도정보와 유사한 구도정보를 검색하고, 상기 검색된 구도정보와 매치되는 상기 영상의 소정 영역을 트리밍하는 디지털 신호 처리수단을 포함하는 영상 트리밍 장치.
제 1항에 있어서, 상기 디스플레이된 영상은

라이브뷰 영상이거나 임의의 저장 영상인 것을 특징으로 하는 영상 트리밍 장치.
제 1항에 있어서, 상기 디지털 신호 처리수단은

상기 트리밍된 영상과 상기 영상을 동시에 디스플레이 하는 것을 특징으로 하는 영상 트리밍 장치.
제 1항에 있어서, 상기 디지털 신호 처리수단은

상기 영상으로부터 구도정보를 추출하는 구도정보 추출부;

임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스;

상기 구도정보 데이터베이스로부터 상기 추출된 영상의 구도정보와 가장 유사한 구도정보를 검색하는 검색부;

상기 검색된 구도정보와 매치되는 상기 영상의 소정 영역을 프레임으로 표시하는 프레임 생성부; 및

상기 생성된 프레임을 트리밍하는 트리밍부를 포함하는 것을 특징으로 하는 영상 트리밍 장치.
제 3항에 있어서, 상기 구도정보 추출부는

상기 영상이 인물 영상인 경우, 얼굴인식을 통하여 구도 정보를 추출하는 것을 특징으로 하는 영상 트리밍 장치.
제 3항에 있어서, 상기 구도정보 추출부는

상기 영상이 배경 영상인 경우, 에지검출을 통하여 구도정보를 추출하는 것을 특징으로 하는 영상 트리밍 장치.
제 3항에 있어서,

상기 구도정보 추출부에서 추출된 구도정보 및/또는 상기 구도정보 데이터베이스로부터 검색된 구도정보는 상기 라이브뷰 영상의 일부분에 표시되는 것을 특징으로 하는 영상 트리밍 장치.
디지털 영상 처리 장치로서,

제1 셔터-릴리즈 버튼 입력에 의해 라이브뷰 영상으로부터 구도정보를 추출 하는 구도정보 추출부;

임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스;

상기 구도정보 데이터베이스로부터 상기 추출된 라이브뷰 영상의 구도정보와 가장 유사한 구도정보를 검색하는 검색부;

상기 검색된 구도정보와 매치되는 상기 라이브뷰 영상의 소정 영역을 프레임으로 표시하는 프레임 생성부; 및

제2 셔터-릴리즈 버튼이 입력되면 상기 생성된 프레임을 트리밍하는 트리밍부를 포함하는 영상 트리밍 장치.
디지털 영상 처리 장치로서,

제1 셔터-릴리즈 버튼 입력에 의해 임의의 재생 영상으로부터 구도정보를 추출하는 구도정보 추출부;

임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스;

상기 구도정보 데이터베이스로부터 상기 추출된 재생 영상의 구도정보와 가장 유사한 구도정보를 검색하는 검색부;

상기 검색된 구도정보와 매치되는 상기 재생 영상의 소정 영역을 프레임으로 표시하는 프레임 생성부; 및

제2 셔터-릴리즈 버튼이 입력되면 상기 생성된 프레임을 트리밍하는 트리밍부를 포함하는 영상 트리밍 장치.
디지털 영상 처리 장치의 동작 방법으로서,

(a) 영상의 구도정보와 유사한 구도정보를 검색하는 단계; 및

(b) 상기 검색된 구도정보와 매치되는 상기 영상의 소정 영역을 트리밍하는 단계를 포함하는 영상 트리밍 방법.
제 10항에 있어서,

(c) 상기 트리밍된 영상과 상기 영상을 동시에 디스플레이 하는 단계를 더 포함하는 것을 특징으로 하는 영상 트리밍 방법.
제 11항에 있어서, 상기 영상은

라이브뷰 영상이거나 임의의 저장 영상인 것을 특징으로 하는 영상 트리밍 방법.
제 10항에 있어서, 상기 (a) 단계는

(a-1) 상기 영상으로부터 구도정보를 추출하는 단계;

(a-2) 임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스로부터 상기 추출된 영상의 구도정보와 가장 유사한 구도정보를 검색하는 단계를 포함하는 것을 특징으로 하는 영상 트리밍 방법.
제 13항에 있어서,

상기 추출된 구도정보 및/또는 상기 구도정보 데이터베이스로부터 검색된 구도정보는 상기 라이브뷰 영상의 일부분에 표시되는 것을 특징으로 하는 영상 트리밍 방법.
제 13항에 있어서, 상기 (a)단계에서 구도정보 추출 시에,

상기 영상이 인물 영상인 경우, 얼굴인식을 통하여 구도 정보를 추출하고, 상기 영상이 배경 영상인 경우, 에지검출을 통하여 구도정보를 추출하는 것을 특징으로 하는 영상 트리밍 방법.
제 10항에 있어서, 상기 (b) 단계는

(b-1) 상기 검색된 구도정보와 매치되는 상기 라이브뷰 영상의 소정 영역을 프레임으로 표시하는 단계; 및

(b-2) 상기 생성된 프레임을 트리밍하는 단계를 포함하는 것을 특징으로 하는 영상 트리밍 방법.
디지털 영상 처리 장치의 동작 방법으로서,

(a) 제1 셔터-릴리즈 버튼 입력에 의해 라이브뷰 영상으로부터 구도정보를 추출하는 단계;

(b) 임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스로부터 상기 추출된 라이브뷰 영상의 구도정보와 가장 유사한 구도정보를 검색하는 단계;

(c) 상기 검색된 구도정보와 매치되는 상기 라이브뷰 영상의 소정 영역을 프레임으로 표시하는 단계; 및

(d) 제2 셔터-릴리즈 버튼이 입력되면 상기 생성된 프레임을 트리밍하는 단계를 포함하는 영상 트리밍 방법.
디지털 영상 처리 장치의 동작 방법으로서,

(a) 제1 셔터-릴리즈 버튼 입력에 의해 임의의 재생 영상으로부터 구도정보를 추출하는 단계;

(b) 임의의 영상들에 대한 최적 구도정보가 저장된 구도정보 데이터베이스로부터 상기 추출된 재생 영상의 구도정보와 가장 유사한 구도정보를 검색하는 단계;

(c) 상기 검색된 구도정보와 매치되는 상기 재생 영상의 소정 영역을 프레임으로 표시하는 단계; 및

(d) 제2 셔터-릴리즈 버튼이 입력되면 상기 생성된 프레임을 트리밍하는 단계를 포함하는 영상 트리밍 방법.