KR20100065318A - 입력 비디오로부터 수정된 비디오를 생성하는 방법 및 디바이스 - Google Patents

입력 비디오로부터 수정된 비디오를 생성하는 방법 및 디바이스 Download PDF

Info

Publication number
KR20100065318A
KR20100065318A KR1020107005083A KR20107005083A KR20100065318A KR 20100065318 A KR20100065318 A KR 20100065318A KR 1020107005083 A KR1020107005083 A KR 1020107005083A KR 20107005083 A KR20107005083 A KR 20107005083A KR 20100065318 A KR20100065318 A KR 20100065318A
Authority
KR
South Korea
Prior art keywords
video
sub
input video
view
input
Prior art date
Application number
KR1020107005083A
Other languages
English (en)
Inventor
데클란 패트릭 켈리
Original Assignee
코닌클리케 필립스 일렉트로닉스 엔.브이.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 코닌클리케 필립스 일렉트로닉스 엔.브이. filed Critical 코닌클리케 필립스 일렉트로닉스 엔.브이.
Publication of KR20100065318A publication Critical patent/KR20100065318A/ko

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Circuits (AREA)

Abstract

본 발명은 입력 비디오로부터 수정된 비디오를 생성하는 방법 및 디바이스를 제공하며, 상기 방법은: 입력 비디오의 서브-뷰에 대응하는 적어도 하나의 서브-비디오를 발생시키는 단계; 및 상기 수정된 비디오를 생성하기 위하여 상기 발생된 서브-비디오를 시간 축을 따라 원래 입력 비디오 내에 통합하는 단계를 포함하고, 그에 의해 수정된 비디오가 입력 비디오로부터 나오는 어떤 클로즈-업 콘텐트를 포함하므로 변경된 비디오는 원래 입력 비디오보다 더 매력적이다.

Description

입력 비디오로부터 수정된 비디오를 생성하는 방법 및 디바이스{METHOD AND DEVICE FOR CREATING A MODIFIED VIDEO FROM AN INPUT VIDEO}
본 발명은 입력 비디오로부터 수정된 비디오를 생성하는, 예를 들어, 캠코더(camcorder)에 의해 캡처(capture)된 입력 비디오를 편집하는 방법 및 디바이스에 관한 것이다.
캠코더와 같은 비디오 레코더(video recoder)에 의해 생성된 비디오 콘텐트(video content)들은 일반적으로 프로페셔널 비디오 콘텐트(professional video content)들보다 더 낮은 품질을 갖는다. 원 캠코더 풋티지(raw camcorder footage)의 진보된 사용자-편집 이후에도, 결과적인 품질은 프로페셔널로 편집된 콘텐트를 보는데 익숙한 사용자들에게 여전히 만족스럽지 않다.
캠코더에 의해 발생된 비디오 콘텐트가 프로페셔널 콘텐트보다 더 나쁘게 보이는 하나의 이유는 비디오 장면(video scene)이 예를 들어, 단일 레코딩 각도(single recording angle)에서 단일 카메라(single camera)에 의해 찍히기 때문이다. 그러나, 프로페셔널 콘텐트의 경우에, 예를 들어, 넓은 앵글 샷들(angle shots)로부터 클로즈-업(close-up)들까지 장면 내에서 각도들을 스위칭하도록 하는 다중-각도 카메라들이 사용된다.
현재, 일부 비디오 편집 소프트웨어(video editing software)가 비디오 편집을 위해 사용자들에게 제공될지라도, 이와 같은 소프트웨어는 특수화된 기술들을 필요로 하여, 사용하기가 어렵고 또한 시간을 소모한다.
본 발명의 목적은 입력 비디오로부터 수정된 비디오를 생성하는 방법을 제공하는 것이다.
이 때문에, 본 발명에 따른 방법은 다음 단계들: 입력 비디오의 서브-뷰(sub-view)에 대응하는 적어도 하나의 서브-비디오(sub-video)를 발생시키는 단계; 및 상기 수정된 비디오를 생성하기 위하여 상기 발생된 서브-비디오를 시간 축을 따라 상기 입력 비디오 내에 통합하는 단계를 포함한다.
수정된 비디오는 입력 비디오로부터 나오는 어떤 클로즈-업 콘텐트를 포함할 수 있고, 이 결과로서, 상기 수정된 비디오는 원래 입력 비디오보다 매력적이다.
유용하게도, 상기 발생 단계는 서브-뷰를 식별하는 단계, 및 상기 원래 입력 비디오로부터 서브-뷰들을 추출하는 단계를 더 포함한다.
유용하게도, 상기 통합 단계는 상기 입력 비디오의 클립(clip)을 발생된 서브-비디오로 교체하는 단계를 포함한다.
유용하게도, 상기 통합 단계는 상기 발생된 서브-비디오를 상기 입력 비디오 내에 삽입하는 단계를 포함한다.
본 발명의 목적은 또한 입력 비디오로부터 수정된 비디오를 생성하는 디바이스를 제공하는 것이다.
이 때문에, 본 발명에 따른 디바이스는 상기 입력 비디오의 서브-뷰에 대응하는 적어도 하나의 서브-비디오를 발생시키는 제 1 모듈(module); 및 상기 수정된 비디오를 생성하기 위하여 상기 서브-비디오를 시간 축을 따라 상기 입력 비디오 내에 통합하는 제 2 모듈을 포함한다.
본 발명의 목적은 또한 입력 비디오로부터 수정된 비디오를 생성하는 상술된 바와 같은 디바이스를 포함하는 비디오 레코더를 제공하는 것이다.
본 발명에 의하면, 입력 비디오로부터 수정된 비디오를 생성하는 방법이 제공된다.
도 1은 본 발명에 따른 입력 비디오로부터 수정된 비디오를 생성하는 방법의 흐름도.
도 2는 본 발명에 따른 입력 비디오로부터 서브-뷰들을 식별하는 예를 도시한 도면.
도 3은 본 발명에 따른 입력 비디오로부터 서브-뷰들을 추출하는 예를 도시한 도면.
도 4 내지 도 6은 본 발명에 따른 시간 축을 따른 수정된 비디오들의 예들을 도시한 도면들.
도 7은 본 발명에 따른 점진적으로 변화하는 크기를 갖는 한 세트의 서브-뷰들을 추출하는 예를 도시한 도면.
도 8은 본 발명에 따른 스크린을 가로질러 서브-뷰들을 이동시키는 예를 도시한 도면.
도 9는 본 발명에서 사용되는 그래픽 사용자 인터페이스(graphical user interface)의 예를 도시한 도면.
도 10은 본 발명에 따른 입력 비디오로부터 수정된 비디오를 생성하는 기능적인 모듈들을 도시한 블록도.
도 11은 본 발명의 실시예에 따른 입력 비디오로부터 수정된 비디오를 생성하는 장치를 개략적으로 도시한 도면.
본 발명의 특정 양태들이 동일한 부분들 또는 서브-단계들이 동일한 방식으로 지정되는 첨부 도면들과 관련하여 고려되고 이하에 기술되는 실시예들을 참조하여 설명될 것이다.
본 발명의 상세한 설명들 및 다른 양태들이 이하에 제공될 것이다.
도 1은 본 발명에 따른 입력 비디오로부터 수정된 비디오를 생성하는 방법의 제 1 흐름도를 도시한다.
상기 방법은 입력 비디오의 서브-뷰에 대응하는 적어도 하나의 서브-비디오를 발생시키는 단계(100) 다음에, 수정된 비디오를 생성하기 위하여 상기 발생된 서브-비디오를 시간 축을 따라 상기 입력 비디오 내에 통합하는 단계(110)를 포함한다.
입력 비디오는 임의의 비디오 포맷(video format), 예를 들어, MPEG-2, MPEG-4, DV, MPG, DAT, AVI, DVD 또는 MOV일 수 있다. 입력 비디오는 비디오 카메라, 예를 들어, 캠코더 등에 의해 캡처될 수 있다.
본 발명에 따르면, 서브-뷰는 입력 비디오 내의 이미지의 부분적인 뷰이다. 예를 들어, 도 2는 좌측 상에 첫 번째 사람(안면 1) 및 우측 상에 두 번째 사람(안면 2)을 갖는 장면을 묘사하는 입력 비디오(200)를 도시하고, 201은 안면 1을 포함하는 제 1 서브-뷰이고; 202는 안면 2를 포함하는 제 2 서브-뷰이며; 203은 안면 2를 또한 포함하지만, 서브-뷰(202)보다 더 큰 배경을 가지는 서브-뷰의 또 다른 예이다.
본 발명에 따르면, 서브-비디오는 입력 비디오의 연속적인 프레임(frame)들에 속하는 서브-뷰들의 데이터를 포함하는 프레임들로 이루어지고, 발생 단계(100)에 의해 발생된다. 예를 들어, 도 3은 시간 축을 따라 좌측 상에 첫 번째 사람 및 우측 상에 두 번째 사람(대화하거나 듣고 있음)을 갖는 입력 비디오(300)의 장면을 도시한다. 서브-뷰들(301)을 포함하는 프레임들로 이루어지는 (파선들에 의해 둘러싸인) 서브-비디오(311)가 발생 단계(100)에 의해 발생된다. 동일한 방식으로, 서브-뷰(302)에 대응하는 서브-비디오(312) 및 서브-뷰(303)에 대응하는 서브-비디오(313)가 또한 발생될 수 있다.
다음 도면들에서, 설명을 용이하게 하기 위하여 상이한 비디오 장면 당 하나의 픽처(picture)만이 도시되어 있다는 점이 주의된다.
단계(110)는 서브-비디오를 입력 비디오 내에 통합하는데 사용된다. 도 4는 입력 비디오(420) 및 서브-비디오들(412, 411, 413)로 이루어지는 수정된 비디오(400)를 시간 축을 따라 도시한다. 즉, 수정된 비디오(400)에서, 첫 번째 1분(minute) 동안 입력 비디오(420)에 속하는 첫 번째 1분의 클립이 재생될 것이고; 두 번째 1분 동안, 서브-비디오(412)가 재생될 것이고; 세 번째 1분 동안, 서브-비디오(411)가 재생될 것이고; 네 번째 1분 동안, 서브-비디오(413)가 재생될 것이고; 다섯 번째 1분 동안, 입력 비디오(420)에 속하는 다섯 번째 1분의 클립이 재생될 것이다. 이와 같은 방식으로, 시간 축을 따라 입력 비디오의 클립들 및 서브-비디오들을 어셈블링(assembling)함으로써, 수정된 비디오(400)가 생성된다.
이하에서 본원에 상세히 설명되는 바와 같이, 통합 단계(110)가 입력 비디오의 데이터 콘텐트에 따라 다양한 방법들에 의해 구현될 수 있다는 점이 당업자들에 의해 이해될 것이다.
대안적으로, 도 1의 흐름도에 의해 도시된 바와 같이, 단계(100)는 서브-뷰를 식별하는 단계(101)를 더 포함한다.
비디오에서 서브-뷰를 식별하기 위하여, 어떤 선호도들이 제공될 필요가 있다. 예를 들어, 희망하는 서브-뷰들의 양, 희망하는 서브-뷰들의 크기, 및 희망하는 서브-뷰들의 형상이 제공될 필요가 있다.
도 2에 의해 도시된 바와 같이, 소정의 선호도는 다음과 같아야 한다: 서브-뷰가 대화하는 콘텐트와 관련되는 경우에, 말하고 있는 사람의 안면을 포함하는 2개의 상이한 크기들의 서브-뷰들, 및 듣고 있는 사람의 안면을 포함하는 제 3 서브-뷰가 식별되어야 한다. 그러므로, 서브-뷰(202) 및 서브-뷰(203)는 말하는 사람의 클로즈-업들로서 식별되고, 서브-뷰(201)는 듣는 사람의 클로즈-업으로서 식별된다.
유용하게도, 식별 단계(101)는 입력 비디오로부터 오브젝트(object)를 검출하여 검출된 오브젝트에 따라 서브-뷰를 식별하는 단계를 더 포함한다.
예를 들어, 입력 비디오의 데이터 콘텐트를 검출함으로써, 안면, 움직이는 오브젝트 또는 중앙 오브젝트가 오브젝트로서 검출될 수 있다. 도 2에 의해 도시된 바와 같이, 픽처의 좌측 상의 안면 1 및 픽처의 우측 상의 안면 2가 오브젝트들로서 검출될 수 있다. 검출 결과 및 미리 규정된 선호도들을 기반으로 하여, 검출된 오브젝트들(안면 1, 안면 2)을 포함하는 서브-뷰들(201, 202, 203)이 상기 식별 단계(101)에서 논의된 바와 같이 식별된다.
대안적으로, 상기 식별 단계(101)는 사용자가 서브-뷰를 식별하는 사용자 입력을 수신하는 단계를 더 포함한다.
도 9는 모든 식별된 서브-뷰들(901, 902, 903) 및 입력 비디오의 하나의 픽처(920)를 사용자에게 디스플레이하는 그래픽 사용자 인터페이스의 예를 도시한다. 사용자는 수정된 비디오를 생성하는데 사용될 서브-뷰들을 선택할 가능성을 갖는다. 이 예에서, 서브-뷰(901)가 사용자에 의해 선택된다.
서브-뷰들은 또한 사용자 인터페이스를 통한 사용자 입력에 의해 완전하게 식별될 수 있다. 이 경우에, 사용자는 서브-뷰에 포함될 오브젝트를 선택하고, 상술된 선호도들을 결정할 것이다.
도 1의 흐름도에 도시된 바와 같이, 단계(100)는 입력 비디오로부터 식별된 서브-뷰를 추출하는 단계(102)를 더 포함한다. 서브-뷰들의 데이터를 포함하는 한 세트의 프레임들이 대응하는 서브-비디오를 발생시키기 위하여 입력 비디오로부터 추출될 것이다.
예를 들어, 도 3은 시간 축을 따른 5분 입력 비디오(300)를 도시한다. 이 입력 비디오가 초 당 25개의 프레임들을 포함하는 경우에, 두 번째 1분은 1500개의 프레임들을 포함한다. 서브-뷰(302)에 대응하는 서브-비디오(312)를 발생시키는 데이터가 이러한 1500개의 프레임들로부터 추출된다. 유사하게, 서브-뷰(301)에 대응하는 서브-비디오(311)가 입력 비디오의 세 번째 1분으로부터 발생되고, 서브-뷰(303)에 대응하는 서브-비디오(313)가 입력 비디오의 네 번째 1분으로부터 발생된다.
추출 단계(102)는 서브-뷰들을 추출하는 방법 및 장소를 지시하는 미리 규정된 기준들을 포함할 수 있다.
예를 들어, 도 3에서, 기준들은 관련된 사람이 말하고 있는 시간 동안 서브-뷰들의 데이터를 추출하는 것일 수 있다. 예를 들어, 픽처의 좌측 상의 사람 1이 세 번째 1분 동안 말하고 있는 경우에, 관련된 서브-뷰들(301)이 입력 비디오의 세 번째 1분 동안 연속적으로 추출될 것이다.
또 다른 예에서, 추출 기준들은 오브젝트가 이동하고 있든지 또는 아니든지 간에, 오브젝트가 항상 서브-뷰들 내에 있도록 검출된 오브젝트를 추적함으로써 서브-뷰들의 데이터를 추출하는 것일 수 있다.
또 다른 예에서, 추출 기준들은 배경 크기를 점진적으로 변화시킴으로써 한 세트의 서브-뷰들을 추출하도록 한다.
예를 들어, 도 7은 다양한 크기들을 갖는 한 세트의 서브-뷰들을 도시한다. 점진적으로 증가하는 크기들을 갖는 한 세트의 서브-뷰들(702(1), 702(2), 702(n))이 입력 비디오(700)로부터 추출된다. 그러므로, 서브-비디오는 점진적으로 증가하는 크기들을 갖는 이러한 서브-뷰들을 기반으로 하여 발생될 것이다. 대응하는 서브-비디오를 재생할 때, 서브-뷰(702) 및 완성된 뷰 사이에 주밍 효과(zooming effect)가 생성될 것이다.
대안적으로, 도 1에 도시된 바와 같이, 통합 단계(110)는 입력 비디오의 클립을 발생된 서브-비디오로 교체하는 단계(111)를 포함한다. 교체될 입력 비디오의 클립은 발생된 서브-비디오와 동일한 시간 길이를 가질 수 있다. 즉, 발생된 서브-비디오의 프레임들이 동일한 시간 길이를 갖는 입력 비디오의 프레임들을 교체하는데 사용된다. 교체된 프레임들은 서브-비디오를 발생시키는데 사용된 프레임들일 수 있다.
예를 들어, 도 4에 도시된 바와 같이, 수정된 비디오(400)는 두 번째 1분의 클립이 서브-비디오(412)로 교체되고, 세 번째 1분의 클립이 서브-비디오(411)로 교체되고, 네 번째 1분의 클립이 서브-비디오(413)로 교체되면서, 원래 입력 비디오(420)로 구성되며, 서브-비디오(412)의 데이터는 입력 비디오(420)의 두 번째 1분으로부터 추출되고, 서브-비디오(411)의 데이터는 입력 비디오(420)의 세 번째 1분으로부터 추출되고, 유사하게, 서브-비디오(413)의 데이터는 입력 비디오(420)의 네 번째 1분으로부터 추출된다.
대안적으로, 교체될 입력 비디오의 클립은 또한 발생된 서브-비디오와 상이한 시간 길이를 가질 수 있는데, 즉, 입력 비디오 클립의 프레임량은 발생된 서브-비디오의 프레임량과 상이하다.
대안적으로, 교체 단계(111)에서, 서브-비디오는 또한 동일한 시간 길이를 갖는 서브-비디오의 데이터를 제공하지 않는 임의의 다른 클립을 교체하는데 사용될 수 있다. 이 경우에, 비디오와 관련된 오디오가 고려되어야 하는데, 그 이유는 프레임들이 교체될 때 대응하는 오디오가 또한 교체될 것이기 때문이다. 오디오가 장애가 생기는 것을 피하기 위하여, 완전한 원래 오디오가 편집 동안 음악으로 교체되거나 제거될 수 있다.
대안적으로, 도 1에 도시된 바와 같이, 통합 단계(110)는 서브-비디오를 시간 축을 따라 입력 비디오 내에 삽입하는 단계(112)를 더 포함한다. 이 경우에, 입력 비디오의 총 지속기간이 변화된다.
예를 들어, 도 5는 본 발명에 따른 시간 축을 따라 수정된 비디오(500)의 예를 도시한다. 서브-비디오(512)가 시간 축을 따라 입력 비디오(520) 내에 삽입된다. 결과적으로, 수정된 비디오(500)의 총 시간 길이가 5분으로부터 6분으로 증가된다. 유사하게, 서브-비디오(512)가 삽입될 때, 대응하는 오디오가 또한 삽입될 것이다. 이 경우에, 원래 오디오는 편집 동안 음악으로 교체될 수 있다. 그러므로, 서브 비디오가 삽입될 때 오디오의 반복이 존재하지 않을 것이다.
대안적으로, 도 1에 도시된 바와 같이, 본 발명에 따른 방법은 발생된 서브-비디오의 디스플레이 크기를 확대하는 단계(107)를 더 포함한다. 예를 들어, 서브-비디오는 원래 입력 비디오의 전체 스크린 크기로 확대된다.
예를 들어, 도 6은 시간 축을 따른 수정된 비디오(600)를 도시하며, 여기서 서브-비디오(611, 612, 613)의 디스플레이 크기가 확대된다.
대안적으로, 상기 확대 단계(107)는 확대된 서브-비디오의 해상도를 높이는 단계(108)를 더 포함한다.
해상도를 높이는 하나의 방식은 예를 들어, 픽셀(pixel)들이 인공적으로 추가되는 것을 의미하는 업-스케일링(up-scaling)이다. 예를 들어, SD(표준 선명도)(576*480 픽셀들)를 HD(고 선명도)(1920*1080 픽셀들)로 업스케일링하는 것은 이러한 해상도를 높이는 단계(108)에 의해 행해질 수 있다.
대안적으로, 본 발명에 따른 방법은 상기 추출된 서브-뷰들의 위치를 시간 축을 따라 점진적으로 이동시키는 단계(105)를 더 포함한다. 이 단계는 수정된 비디오에서 패닝 효과(panning effect)가 생성되도록 한다.
도 8은 추출된 서브-뷰들(802(a), 802(b), 802(c)... 및 (802(n))의 위치를 연속적으로 이동시키는 예를 도시한다. 스크린 상에 상이한 위치들에 위치된 서브-뷰들(802(a), 802(b), 802(c)... 및 (802(n))의 프레임들로 구성된 서브-비디오를 재생할 때, 패닝 효과가 생성될 것이다.
대안적으로, 본 발명에 따른 방법은 서브-비디오를 점진적으로 페이드 인(fade in) 또는 페이드 아웃(fade out)하는 단계(106)를 더 포함한다. 페이드 인은 여기서 이미지 또는 사운드가 점진적으로 나타나거나 들리도록 한다는 것을 의미한다. 페이드 아웃은 여기서 이미지 또는 사운드가 점진적으로 사라지도록 한다는 것을 의미한다.
도 10은 입력 비디오(1001)로부터 수정된 비디오(1030)를 생성하는, 본 발명에 따른 디바이스(1000)의 기능적인 모듈들을 도시한다. 디바이스(1000)의 기능적인 모듈들은 상술된 본 발명에 따른 방법의 단계들의 기능들을 수행하도록 의도된다.
비디오 수정 디바이스(1000)는 입력 비디오의 서브-뷰에 대응하는 적어도 하나의 서브-비디오를 발생시키는 제 1 모듈(1010), 및 수정된 비디오를 생성하기 위하여 상기 발생된 서브-비디오를 시간 축을 따라 원래 입력 비디오 내에 통합하는 제 2 모듈(1020)을 포함한다.
제 1 모듈(1010)은 원래 입력 비디오의 데이터 콘텐트로부터 서브-뷰를 식별하는 제 1 유닛(1011), 및 원래 입력 비디오로부터 식별된 서브-뷰를 추출하는 제 2 유닛(1012)을 더 포함한다.
제 1 유닛(1011)은 미리 규정된 선호도들 및 소정의 오브젝트에 따라 서브-뷰를 식별하는데 사용된다. 오브젝트를 검출하기 위하여, 안면 검출 유닛, 이동하는 오브젝트 검출 유닛, 중앙 오브젝트 검출 유닛 등과 같은 어떤 종류의 오브젝트 검출 유닛이 사용될 수 있다. 오브젝트를 검출한 이후에, 시스템은 본 발명의 방법에 따라서 상술된 바와 같이, 미리 규정된 선호도들에 따라 검출된 오브젝트를 포함하는 서브-뷰를 식별한다.
제 2 유닛(1012)은 상술된 단계(102)와 유사하게, 원래 입력 비디오로부터 서브-뷰들을 추출하는데 사용된다.
제 2 모듈(1020)은 수정된 비디오를 생성하기 위하여 서브-비디오를 원래 입력 비디오 내에 통합하는데 사용된다.
대안적으로, 제 2 모듈(1020)은 본 발명의 방법에 따라서 상술된 단계(111)와 유사하게, 입력 비디오의 클립들을 발생된 서브-비디오로 교체하는 제 3 유닛(1021)을 더 포함한다.
대안적으로, 제 2 모듈(1020)은 본 발명의 방법에 따라 설명된 단계(112)와 유사하게, 발생된 서브-비디오를 원래 입력 비디오 내에 삽입하는 제 4 유닛(1022)을 더 포함한다.
대안적으로, 제 1 모듈(1010)은 사용자가 서브-뷰를 식별하는 사용자 입력을 수신하는 제 5 유닛(1013)을 더 포함한다. 수신 유닛(1013)은 사용자 인터페이스를 통하여 사용자 입력을 수신한다. 사용자는 본 발명의 방법에 따라 상술된 사용자 입력을 수신하는 단계와 유사하게, 시스템에 의해 제공된 서브-뷰들을 선택하거나 또는 오브젝트를 선택하고 대응하는 서브-뷰들을 직접적으로 식별할 수 있다.
도 11은 본 발명에 따른 입력 비디오로부터 수정된 비디오를 생성하는 디바이스의 구현예를 도시한다.
이 구현예는:
- 원래 입력 비디오의 소정의 오브젝트를 포함하는 서브-뷰를 식별하는 제 1 프로세서(1181); 및
- 상기 제 1 프로세서(1181)에 연결되고, 식별된 서브-뷰 및 관련된 코드 명령들을 저장하는 제 1 메모리(1182)를 포함한다.
이 구현예는 또한:
- 원래 입력 비디오로부터 서브-뷰들을 추출하는 제 2 프로세서(1183); 및
- 상기 제 2 프로세서(1183)에 연결되고, 서브-뷰 데이터 및 관련된 코드 명령들을 저장하는 제 2 메모리(1184)를 포함한다.
이 구현예는 또한:
- 원래 입력 비디오를 통합하는 제 3 프로세서(1185); 및
- 상기 제 3 프로세서(1185)에 연결되고, 원래 입력 비디오, 발생된 서브-비디오, 수정된 비디오 및 관련된 코드 명령들을 저장하는 제 3 메모리(1186)를 포함한다.
메모리들(1182, 1184, 1186) 및 프로세서들(1181, 1183, 1185)은 유용하게도 데이터 버스(data bus)를 통하여 통신한다.
메모리들(1182, 1184, 1186)이 하나의 메모리로 조합될 수 있고, 프로세서들(1181, 1183, 1185)이 단일 프로세서 내에 결합될 수 있다는 점이 당업자들에 의해 이해될 것이다.
본 발명이 하드웨어(hardware) 또는 소프트웨어(software) 또는 이들의 조합에 의해 구현될 수 있다는 점이 또한 당업자들에 의해 이해될 것이다.
본 발명은 또한 입력 비디오를 레코딩하고, 입력 비디오로부터 수정된 비디오를 생성하는 디바이스(1000)를 포함하는 비디오 레코더에 관한 것이다. 상기 비디오 레코더는 예를 들어, 캠코더 등에 대응한다.
본 발명이 도면들 및 상세한 설명에서 상세히 도시 및 설명되었지만, 도면 및 설명은 제한적인 것이 아니라, 설명적이거나 예시적인 것으로 간주되어야 하고; 본 발명은 개시된 실시예들로 제한되지 않는다.
청구항에서의 임의의 참조 부호는 청구항을 제한하는 것으로 해석되어서는 안된다. 단어 "포함하는"은 청구항에서 목록화된 것들 이외의 요소들의 존재를 배제하지 않는다. 요소 앞의 단어 "a" 또는 "an"은 복수의 이와 같은 요소들의 존재를 배제하지 않는다.
1000 : 비디오 수정 디바이스 1010 : 제 1 모듈
1011 : 제 1 유닛 1012 : 제 2 유닛
1013 : 제 5 유닛 1020 : 제 2 모듈
1021 : 제 3 유닛 1022 : 제 4 유닛
1181 : 제 1 프로세서 1182 : 제 1 메모리
1183 : 제 2 프로세서 1184 : 제 2 메모리
1185 : 제 3 프로세서 1186 : 제 3 메모리

Claims (17)

  1. 입력 비디오(420, 520, 620)로부터 수정된 비디오(400, 500, 600)를 생성하는 방법에 있어서:
    상기 입력 비디오의 서브-뷰에 대응하는 적어도 하나의 서브-비디오를 발생시키는 단계(100);
    상기 수정된 비디오를 생성하기 위하여 상기 서브-비디오를 시간 축을 따라 상기 입력 비디오 내에 통합하는 단계(110)를 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 방법.
  2. 제 1 항에 있어서,
    상기 발생 단계(100)는 서브-뷰를 식별하는 단계(101), 및 상기 입력 비디오로부터 상기 서브-뷰들을 추출하는 단계(102)를 추가로 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 방법.
  3. 제 2 항에 있어서,
    상기 식별 단계(101)는 상기 입력 비디오로부터 오브젝트를 검출하여 상기 검출된 오브젝트에 따라 서브-뷰를 식별하는 단계를 추가로 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 방법.
  4. 제 2 항에 있어서,
    상기 식별 단계(101)는 서브-뷰를 식별하는 사용자 입력을 수신하는 단계를 추가로 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 방법.
  5. 제 2 항에 있어서,
    상기 추출 단계는 배경 크기를 점진적으로 변화시킴으로써 한 세트의 서브-뷰들을 추출하도록 하는, 입력 비디오로부터 수정된 비디오를 생성하는 방법.
  6. 제 1 항에 있어서,
    상기 통합 단계(110)는 상기 입력 비디오의 클립을 상기 발생된 서브-비디오로 교체하는 단계(111)를 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 방법.
  7. 제 1 항에 있어서,
    상기 통합 단계(110)는 상기 서브-비디오를 상기 입력 비디오 내에 삽입하는 단계(112)를 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 방법.
  8. 제 1 항에 있어서,
    상기 서브-비디오의 디스플레이 크기를 확대하는 단계(107)를 추가로 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 방법.
  9. 제 8 항에 있어서,
    상기 확대 단계는 확대된 서브-비디오의 해상도를 높이는 단계(108)를 추가로 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 방법.
  10. 제 2 항에 있어서,
    상기 추출된 서브-뷰의 위치를 상기 시간 축을 따라 점진적으로 이동시키는 단계(105)를 추가로 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 방법.
  11. 제 1 항에 있어서,
    상기 서브-비디오를 페이드 인 또는 페이드 아웃하는 단계(106)를 추가로 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 방법.
  12. 입력 비디오(420, 520, 620)로부터 수정된 비디오(400, 500, 600)를 생성하는 디바이스에 있어서:
    상기 입력 비디오의 서브-뷰에 대응하는 적어도 하나의 서브-비디오를 발생시키는 제 1 모듈(1010); 및
    상기 수정된 비디오를 생성하기 위하여 상기 서브-비디오를 시간 축을 따라 상기 입력 비디오 내에 통합하는 제 2 모듈(1020)을 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 디바이스.
  13. 제 12 항에 있어서,
    상기 제 1 모듈(1010)은 상기 입력 비디오로부터 서브-뷰를 식별하는 제 1 유닛(1011), 및 상기 입력 비디오로부터 상기 서브-뷰를 추출하는 제 2 유닛(1012)을 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 디바이스.
  14. 제 12 항에 있어서,
    상기 제 2 모듈(1020)은 상기 입력 비디오의 프레임들을 상기 발생된 서브-비디오로 교체하는 제 3 유닛(1021)을 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 디바이스.
  15. 제 12 항에 있어서,
    상기 제 2 모듈(1020)은 상기 서브-비디오를 상기 입력 비디오 내에 삽입하는 제 4 유닛(1022)을 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 디바이스.
  16. 제 12 항에 있어서,
    상기 제 1 모듈(1010)은 서브-뷰를 식별하는 사용자 입력을 수신하는 제 5 유닛(1013)을 추가로 포함하는, 입력 비디오로부터 수정된 비디오를 생성하는 디바이스.
  17. 입력 비디오(420, 520, 620)로부터 수정된 비디오(400, 500, 600)를 생성하는 제 12 항에 따른 디바이스를 포함하는, 입력 비디오(420, 520, 620)를 레코딩하는 캠코더.
KR1020107005083A 2007-08-09 2008-08-05 입력 비디오로부터 수정된 비디오를 생성하는 방법 및 디바이스 KR20100065318A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN200710140722.7 2007-08-09
CN200710140722 2007-08-09

Publications (1)

Publication Number Publication Date
KR20100065318A true KR20100065318A (ko) 2010-06-16

Family

ID=40210471

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020107005083A KR20100065318A (ko) 2007-08-09 2008-08-05 입력 비디오로부터 수정된 비디오를 생성하는 방법 및 디바이스

Country Status (9)

Country Link
US (1) US20110235997A1 (ko)
EP (1) EP2174486A2 (ko)
JP (1) JP2010536220A (ko)
KR (1) KR20100065318A (ko)
CN (1) CN101785298A (ko)
BR (1) BRPI0815023A2 (ko)
MX (1) MX2010001474A (ko)
RU (1) RU2010108268A (ko)
WO (1) WO2009019651A2 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106507200B (zh) * 2015-09-07 2020-09-01 腾讯科技(深圳)有限公司 视频播放内容插入方法和系统
CN108184078A (zh) * 2017-12-28 2018-06-19 可贝熊(湖北)文化传媒股份有限公司 一种视频处理系统及其方法
CN113079406A (zh) * 2021-03-19 2021-07-06 上海哔哩哔哩科技有限公司 视频处理方法及装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000197022A (ja) * 1998-12-25 2000-07-14 Matsushita Electric Ind Co Ltd 画像切り出し装置およびテレビ電話装置
WO2000039997A2 (en) * 1998-12-30 2000-07-06 Earthnoise.Com Inc. Creating and editing digital video movies
US6738075B1 (en) * 1998-12-31 2004-05-18 Flashpoint Technology, Inc. Method and apparatus for creating an interactive slide show in a digital imaging device
US7334249B1 (en) * 2000-04-26 2008-02-19 Lucent Technologies Inc. Method and apparatus for dynamically altering digital video images
US7432940B2 (en) * 2001-10-12 2008-10-07 Canon Kabushiki Kaisha Interactive animation of sprites in a video production
US7203380B2 (en) * 2001-11-16 2007-04-10 Fuji Xerox Co., Ltd. Video production and compaction with collage picture frame user interface
WO2004081940A1 (en) * 2003-03-11 2004-09-23 Koninklijke Philips Electronics N.V. A method and apparatus for generating an output video sequence
JP4168940B2 (ja) * 2004-01-26 2008-10-22 三菱電機株式会社 映像表示システム
US20050185047A1 (en) * 2004-02-19 2005-08-25 Hii Desmond Toh O. Method and apparatus for providing a combined image
JP4282583B2 (ja) * 2004-10-29 2009-06-24 シャープ株式会社 動画編集装置及び方法
US7492821B2 (en) * 2005-02-08 2009-02-17 International Business Machines Corporation System and method for selective image capture, transmission and reconstruction
JP2007115293A (ja) * 2005-10-17 2007-05-10 Toshiba Corp 情報記憶媒体、プログラム、情報再生方法、情報再生装置、データ転送方法、及びデータ処理方法
JP4760572B2 (ja) * 2006-06-30 2011-08-31 ソニー株式会社 編集装置および編集方法、並びにプログラム

Also Published As

Publication number Publication date
WO2009019651A3 (en) 2009-04-02
CN101785298A (zh) 2010-07-21
BRPI0815023A2 (pt) 2015-03-10
MX2010001474A (es) 2010-03-01
EP2174486A2 (en) 2010-04-14
US20110235997A1 (en) 2011-09-29
JP2010536220A (ja) 2010-11-25
WO2009019651A2 (en) 2009-02-12
RU2010108268A (ru) 2011-09-20

Similar Documents

Publication Publication Date Title
US7231100B2 (en) Method of and apparatus for processing zoomed sequential images
KR101318459B1 (ko) 수신기 상에서 오디오비주얼 문서를 시청하는 방법 및이러한 문서를 시청하기 위한 수신기
US8098261B2 (en) Pillarboxing correction
EP2180701A1 (en) Image processing device, dynamic image reproduction device, and processing method and program in them
EP2359368B1 (en) Merging of a video and still pictures of the same event, based on global motion vectors of this video.
US20100183278A1 (en) Capturing and inserting closed captioning data in digital video
US7929028B2 (en) Method and system for facilitating creation of content
JP5613991B2 (ja) 再生演出プログラムおよび再生演出装置
KR101518814B1 (ko) 360도 서라운드 뷰 영상 데이터를 이용한 방송 컨텐츠의 저작방법
US11211097B2 (en) Generating method and playing method of multimedia file, multimedia file generation apparatus and multimedia file playback apparatus
JP2010503006A5 (ko)
JP5393237B2 (ja) 画像表示装置及びその制御方法、並びにプログラム及び記憶媒体
CN101193249A (zh) 影像处理装置
KR102561371B1 (ko) 디스플레이장치와, 기록매체
KR20100065318A (ko) 입력 비디오로부터 수정된 비디오를 생성하는 방법 및 디바이스
KR101430985B1 (ko) 2d-3d 복합 차원 콘텐츠 파일을 사용하는 복합 차원 콘텐츠 서비스 제공 시스템, 그 서비스 제공 방법
JP2014220722A (ja) 表示制御装置、表示制御方法、およびプログラム
JP2007515864A (ja) ビデオ画像処理方法
JP2012004653A (ja) 画像処理装置及びその制御方法
TWI355852B (en) Video recording and playing system and method for
JP2006324941A (ja) 画像処理装置および方法、並びにプログラム
JP5089648B2 (ja) 映像比較装置,映像比較方法,映像比較プログラムおよび映像比較プログラムの記録媒体
KR20190122053A (ko) 객체 영상 트랙킹 스트리밍 시스템 및 이를 이용한 스트리밍 방법
JP6319273B2 (ja) プログラムおよび表示装置
CN118413803A (zh) 获得用于捕获空间音频的校准数据

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid