KR101571687B1 - 동영상 이펙트 적용 장치 및 방법 - Google Patents

동영상 이펙트 적용 장치 및 방법 Download PDF

Info

Publication number
KR101571687B1
KR101571687B1 KR1020140063267A KR20140063267A KR101571687B1 KR 101571687 B1 KR101571687 B1 KR 101571687B1 KR 1020140063267 A KR1020140063267 A KR 1020140063267A KR 20140063267 A KR20140063267 A KR 20140063267A KR 101571687 B1 KR101571687 B1 KR 101571687B1
Authority
KR
South Korea
Prior art keywords
effect
frame
moving picture
unit
image
Prior art date
Application number
KR1020140063267A
Other languages
English (en)
Inventor
이정빈
Original Assignee
이정빈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이정빈 filed Critical 이정빈
Priority to KR1020140063267A priority Critical patent/KR101571687B1/ko
Application granted granted Critical
Publication of KR101571687B1 publication Critical patent/KR101571687B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/08Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 동영상 이펙트 적용 장치 및 방법에 관한 것으로서, 더욱 상세히는 미리 저장된 영상 또는 촬영 영상에 대한 이펙트를 제공하는 동영상 이펙트 적용 장치 및 방법에 관한 것이다. 본 발명의 실시예에 따른 동영상 이펙트 적용 장치는 사용자가 강조하고자 하는 프레임을 복제하여 동일 프레임이 연속 재생되도록 하고 해당 동일 프레임상에 이펙트 영상을 합성하여 사용자의 감정상태나 표현, 강조하고자 하는 특정 부분을 크게 부각시킬 수 있으며, 이를 통해 사용자가 원하는 특정 화면을 정지시킨 것과 같은 효과를 부여하는 동시에 해당 특정 화면에서의 감정상태나 표현 등을 이펙트 영상을 통해 더욱 강조하여 동영상을 이용한 표현 방식을 다양하게 확장시키고 사용자의 흥미와 재미를 배가하는 효과가 있다.

Description

동영상 이펙트 적용 장치 및 방법{Apparatus and method for applying effect to image}
본 발명은 동영상 이펙트 적용 장치 및 방법에 관한 것으로서, 더욱 상세히는 미리 저장된 영상 또는 촬영 영상에 대한 이펙트를 제공하는 동영상 이펙트 적용 장치 및 방법에 관한 것이다.
소셜 네트워킹 시스템의 발전과 더불어 사용자간 다양한 컨텐츠를 상호 공유하는 환경이 조성되어 있으며, 이를 통한 사용자간 커뮤니케이션에서 이모티콘이나 플래시콘과 같은 컨텐츠를 텍스트 메시지와 함께 상대방에게 전달하여, 사용자가 별도의 가공 없이 텍스트 메시지를 통해 작성된 현재 감정상태나 의견, 정보 등을 컨텐츠를 통해 강조하는 형태로 사용할 수 있다.
그러나, 특정 서비스를 통해 제공되는 컨텐츠들은 한정되어 있으므로, 자신의 의견, 감정, 정보의 표현 방식에 대한 다양함을 원하는 사용자는 직접 카메라가 구비된 사용자 장치를 이용하여 촬영된 영상 컨텐츠를 상대방에게 전송함으로써 사용자가 전달하고자 하는 의견이나 감정상태 또는 정보 등을 담은 영상을 통해 표현할 수 있다.
하지만, 이러한 동영상은 텍스트 메시지와 다르게 다른 컨텐츠와의 상호 연동 없이 개별적으로 전송되며, 사용자가 촬영한 영상에서 특정 부분을 강조하는 등의 별도 가공을 위한 장치 및 이를 이용한 서비스가 지원되지 않아, 사용자간 커뮤니케이션 서비스에서 동영상 이용률이 극히 미비하다.
다시 말해, 텍스트 또는 2차원 이미지를 이용한 커뮤니케이션에서 다양한 이모티콘, 플래시콘과 같은 다양한 컨텐츠를 통해 사용자가 전달하고자 하는 의견이나 감정상태를 강조할 수 있도록 지원하여 사용자의 흥미와 커뮤니케이션의 재미를 충족시키는 것과 달리, 동영상을 이용한 커뮤니케이션에서는 다른 컨텐츠를 이용하여 동영상의 특정 부분을 강조할 수 있도록 지원하는 장치가 마련되지 않아 사용자의 흥미와 재미를 충족시키는데 한계가 있으며 이에 따라 텍스트 메시지에 비해 동영상의 이용률이 극히 미비하다.
따라서, 동영상에서 사용자가 강조하고픈 부분을 다른 컨텐츠를 이용하여 강조할 수 있도록 지원함으로써, 사용자간 커뮤니케이션에서 동영상의 생성에 대한 사용자의 흥미를 극대화하고 동영상을 활용한 사용자의 표현 형태를 확장시킬 수 있는 장치의 개발이 요구되고 있다.
한국공개특허 제10-2004-0058854호
본 발명은 동영상을 이용하여 사용자의 흥미를 극대화하고 동영상을 활용한 사용자의 표현 형태를 확장시킬 수 있는 합성 동영상을 제작할 수 있도록 제공하여, 동영상을 이용한 사용자간 커뮤니케이션 확대를 도모하는데 그 목적이 있다.
또한, 본 발명은 동영상에서 사용자가 이펙트를 적용하고자 하는 프레임에 용이하게 이펙트 영상을 적용하여, 동영상의 재생 중에 정지된 화면 상에서 이펙트 영상이 재생되어 동영상에서 사용자가 강조하고자 하는 프레임에 대한 이펙트를 영상으로서 제공하여 사용자가 원하는 프레임을 부각시키도록 하는데 그 목적이 있다.
더하여, 본 발명은 동영상에서 사용자가 이펙트를 적용하고자 하는 프레임의 재생위치에 관계없이 이펙트 영상이 완벽히 재생되도록 하여 이펙트 영상에 따른 이펙트 효과를 극대화하는데 그 목적이 있다.
본 발명의 실시예에 따른 동영상 이펙트 적용 장치는 동영상에서 선택된 선택 프레임을 추출하는 프레임 추출부와, 상기 선택 프레임에 적용되는 이펙트 영상을 선택하는 이펙트 선택부와, 상기 이펙트 영상의 전체 재생 구간에 대응되도록 상기 선택 프레임을 복제하여 생성된 하나 이상의 복제 프레임을 상기 동영상에서 상기 선택 프레임의 재생 시점 이후에 삽입하여 상기 동영상에 이펙트 구간을 생성하는 프레임 삽입부 및 상기 이펙트 구간에 포함된 각 프레임에 상기 이펙트 영상을 구성하는 각 이펙트 프레임을 재생 순서에 따라 순차 합성 및 렌더링하여 합성 동영상을 생성하는 렌더링부를 포함할 수 있다.
본 발명과 관련된 일 예로서, 상기 합성 동영상을 미리 설정된 코덱으로 인코딩하는 인코딩부를 더 포함하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 동영상 이펙트 적용 장치는 미리 저장된 하나 이상의 연락정보 중 선택된 연락정보로 인코딩된 합성 동영상을 전송하는 메신저부를 더 포함하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 메신저부는 상기 프레임 추출부와 연동하여 상기 최종 동영상 파일에 포함된 합성 프레임 중 하나를 대표 합성 프레임으로 선택하며, 상기 프레임 삽입부와 연동하여 선택된 상기 대표 합성 프레임을 복제한 후 상기 최종 동영상 파일의 첫번째 프레임으로 추가 삽입하여 상기 대표 합성 프레임이 상기 최종 동영상 파일의 썸네일로 표시되도록 하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 동영상에 대응되는 음성정보 및 상기 이펙트 영상에 대응되는 이펙트 음성정보를 추출하여 상기 이펙트 구간에서 상기 이펙트 음성정보가 출력되도록 상기 이펙트 음성정보의 재생구간을 상기 이펙트 구간의 재생 시작 시점 및 재생 종료 시점으로 조정하여 갱신 이펙트 음성 정보를 생성하며, 상기 음성정보 중 상기 이펙트 구간에 대응되는 재생구간을 상기 이펙트 구간 이후에 재생되도록 조정하여 갱신 음성 정보를 생성한 후 상기 인코딩부에 제공하여 상기 합성 동영상과 함께 인코딩되도록 하는 음성 추출부를 더 포함하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 이펙트 영상은 동영상 클립, 플래시 및 동영상 템플릿 중 어느 하나인 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 동영상 이펙트 적용 장치는 상기 동영상, 이펙트 영상 및 합성 동영상 중 어느 하나를 재생하는 재생부를 더 포함하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 재생부는 상기 동영상에서 선택된 재생 시점에 대응되는 프레임에 대한 스틸 이미지 또는 썸네일 이미지를 제공하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 동영상 이펙트 적용 장치는 촬영을 통해 상기 동영상을 생성하는 카메라부를 더 포함하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 동영상 이펙트 적용 장치는 하나 이상의 상기 이펙트 영상을 저장하는 저장부를 더 포함하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 상기 선택 프레임에서 전경에 해당하는 영역을 검출하며, 상기 이펙트 선택부를 통해 선택된 이펙트 영상의 이펙트 프레임 중 어느 하나로부터 공백 영역을 검출하는 검출부를 더 포함하며, 상기 검출부는 상기 전경 영역과 상기 공백 영역이 가장 많이 중복되도록 상기 이펙트 영상에 포함된 각 이펙트 프레임의 사이즈 및 위치 중 적어도 하나를 조정하여 상기 이펙트 영상을 갱신시키는 것을 특징으로 할 수 있다.
본 발명의 실시예에 따른 동영상 이펙트 적용 방법은 동영상 이펙트 적용 장치가 미리 저장된 동영상을 구성하는 프레임 중 어느 하나와 미리 저장된 이펙트 영상 중 하나를 선택하는 단계와, 상기 동영상 이펙트 적용 장치가 상기 동영상에서 선택된 선택 프레임을 복제한 후 상기 선택 프레임의 재생시점 이후에 재생되도록 상기 동영상에 삽입하여 상기 이펙트 영상의 전체 재생 구간에 대응되는 이펙트 구간을 상기 동영상에 생성하는 단계와, 상기 동영상 이펙트 적용 장치가 상기 이펙트 구간에 포함된 각 프레임에 상기 이펙트 영상에 포함된 각 이펙트 프레임을 재생 순서에 따라 순차 합성 및 렌더링하여 합성 동영상을 생성하는 단계 및 상기 동영상 이펙트 적용 장치가 상기 합성 동영상을 미리 설정된 코덱으로 인코딩하는 단계를 포함할 수 있다.
본 발명의 실시예에 따른 동영상 이펙트 적용 장치는 사용자가 강조하고자 하는 프레임을 복제하여 동일 프레임이 연속 재생되도록 하고 해당 동일 프레임상에 이펙트 영상을 합성하여 사용자의 감정상태나 표현, 강조하고자 하는 특정 부분을 크게 부각시킬 수 있으며, 이를 통해 사용자가 원하는 특정 화면을 정지시킨 것과 같은 효과를 부여하는 동시에 해당 특정 화면에서의 감정상태나 표현 등을 이펙트 영상을 통해 더욱 강조하여 동영상을 이용한 표현 방식을 다양하게 확장시키고 사용자의 흥미와 재미를 배가하는 효과가 있다.
또한, 본 발명은 이펙트 영상의 재생길이만큼 동영상에서 이펙트가 적용되는 프레임을 복제하여 동영상의 전체 재생 구간을 늘이도록 구성되므로, 이를 통해 선택 프레임이 동영상의 마지막에 위치하는 경우라도 이펙트 영상의 재생을 위한 이펙트 재생 구간을 확보하여 이펙트 영상이 도중에 끊기지 않고 완벽히 재생되도록 지원함으로써 동영상에 대한 이펙트 적용 효과를 극대화시킬 수 있다.
더하여, 상술한 바와 같이 동영상 이펙트 적용 장치는 이펙트 구간에서 이펙트 영상의 음성이 출력되도록 할 수 있으며, 동영상과 이펙트 영상에 포함된 음성정보에 대한 별도의 합성 과정이 필요 없으므로 합성 동영상의 생성 과정이 간편하며 부하를 줄일 수 있다.
이외에도, 본 발명은 동영상에 적용되는 이펙트 영상의 이용을 활성화시키고, 이에 따른 이펙트 영상에 대한 컨텐츠의 제작을 촉진하여 동영상을 이용한 사용자간 커뮤니케이션을 크게 활성화시키는 효과가 있다.
그밖에, 본 발명은 동영상에 적용되는 이펙트 영상의 제작을 활성화시킬 수 있으며, 이를 통해 다양한 이펙트 영상의 제작도구를 활용하여 누구나 이펙트 영상을 용이하게 제작하여 창의적이고 참신한 이펙트 영상의 개발을 촉진시키고 이에 따른 시장형성이 이루어지도록 지원하는 효과가 있다.
도 1은 본 발명의 실시예에 따른 동영상 이펙트 적용 장치에 대한 상세 구성도.
도 2는 본 발명의 실시예에 따른 동영상 이펙트 적용 장치의 동영상에서 프레임 선택 과정에 대한 예시도.
도 3은 본 발명의 실시예에 따른 동영상 이펙트 적용 장치의 이펙트 영상 선택에 대한 예시도.
도 4는 본 발명의 실시예에 따른 동영상 이펙트 적용 장치가 합성 동영상을 생성하는 과정에 대한 예시도.
도 5는 본 발명의 실시예에 따른 동영상 이펙트 적용 장치에 의해 생성된 합성 동영상의 예시도.
도 6은 본 발명의 실시예에 따른 합성 동영상의 재생시 프레임 순서에 대한 예시도.
도 7은 본 발명의 실시예에 따른 동영상 이펙트 적용 장치의 전경 및 배경 분리에 따른 이펙트 영상의 선택 과정에 대한 구성도.
도 8은 본 발명의 실시예에 따른 동영상 이펙트 적용 장치의 복수 이펙트 구간을 가지는 합성 동영상 생성에 대한 예시도.
도 9는 본 발명의 실시예에 따른 동영상 이펙트 적용 장치의 서버 구성에 대한 예시도.
도 10은 본 발명의 실시예에 따른 동영상 이펙트 적용 방법에 대한 순서도.
이하, 도면을 참고하여 본 발명의 상세 실시예를 설명한다.
도 1은 본 발명의 실시예에 따른 동영상 이펙트 적용 장치(100)에 대한 상세 구성도로서, 도시된 바와 같이 프레임 추출부(110), 재생부(120), 이펙트 선택부(130), 프레임 삽입부(140), 렌더링부(150), 인코딩부(160) 및 음성추출부(170)를 포함할 수 있다.
본 발명의 실시예에 따른 동영상 이펙트 적용 장치(100)는 태블릿 PC(Tablet PC), 랩톱(Laptop), 스마트폰(Smart Phone), 개인휴대용 정보단말기(PDA: Personal Digital Assistant), 이동통신 단말기(Mobile Communication Terminal) 및 카메라(Camera) 등과 같은 사용자 장치(1)에 구성될 수 있으며, 어플리케이션 형태로 구현될 수도 있다.
또한, 동영상 이펙트 적용 장치(100)는 사용자 장치(1)와 통신망을 통해 통신하는 서버에 구성될 수도 있으며, 이때 통신망은 널리 알려진 다양한 통신방식이 적용될 수 있다.
이하, 동영상 이펙트 적용 장치(100)가 사용자 장치(1)에 구성된 실시예를 상세히 설명한다.
우선, 재생부(120)는 사용자 장치(1)에 구성된 메모리부(210)에 미리 저장된 동영상이나 상기 사용자 장치(1)에 구성된 카메라부(230)를 통해 촬영되어 상기 메모리부(210)에 저장된 동영상 중 사용자 장치(1)에 구성된 사용자 인터페이스부(240)를 통한 사용자 입력에 따라 선택된 동영상을 로드할 수 있으며, 사용자 장치(1)에 구성된 출력부(250)를 통해 로드된 동영상을 출력하여 재생할 수 있다.
이때, 상기 카메라부(230), 메모리부(210), 사용자 인터페이스부(240), 출력부(250) 및 후술하는 통신부(220)는 동영상 이펙트 적용 장치(100)에 포함될 수도 있음은 물론이다.
또한, 상기 출력부(250)는 스피커, 디스플레이, 터치 스크린 등을 포함할 수 있으며, 사용자 인터페이스부(240)는 사용자 입력을 수신하기 위한 다양한 입력수단 및 외부기기와의 인터페이스를 지원하는 다양한 통신방식의 연결포트를 포함할 수 있으며, 상기 출력부(250)와 연동하여 터치스크린을 통한 터치 입력에 따른 사용자 입력을 제공할 수 있다.
더하여, 상기 동영상은 avi, wmv, mpeg, mkv, mp4, mov, m4v 등과 같은 형태의 확장자를 가지는 영상일 수 있다.
다음, 프레임 추출부(110)는 도 2(a)에 도시된 바와 같이 재생부(120)와 연동하여 재생부(120)를 통해 로드된 동영상에서 사용자 인터페이스부(240)를 통한 사용자 입력에 따라 이펙트를 적용하고자 하는 프레임을 선택한 후 추출할 수 있다.
이때, 재생부(120)는 도 2(b)에 도시된 바와 같이 동영상을 구성하는 프레임 중 드래그 입력과 같은 사용자 입력에 따라 선택된 재생시점의 프레임에 대응되는 스틸이미지 또는 썸네일 이미지를 출력부(250)를 통해 제공하며, 상기 스틸이미지 또는 썸네일 이미지를 통해 사용자가 이펙트를 통해 강조하고자 하는 프레임을 용이하게 선택할 수 있도록 제공한다.
한편, 프레임 추출부(110)는 동영상에서 사용자 인터페이스부(240)를 통한 사용자 입력에 따라 선택된 선택 프레임을 추출하고, 해당 선택 프레임에 대한 선택 프레임 정보를 생성하여 프레임 삽입부(140)로 상기 선택 프레임이 추출된 동영상과 함께 제공할 수 있다.
일례로, 도 2(c)에 도시된 바와 같이 프레임 추출부(110)는 프레임 10이 선택된 경우 프레임 10을 추출하고 프레임 10에 대응되는 선택 프레임 정보를 생성하여 프레임 삽입부(140)로 동영상과 함께 제공할 수 있다.
또한, 프레임 추출부(110)는 프레임 추출시 이펙트 선택부(130)를 활성화할 수 있다.
이에 따라, 활성화된 이펙트 선택부(130)는 메모리부(210)에 저장된 이펙트 영상에 대한 리스트 정보를 상기 출력부(250)를 통해 제공할 수 있다. 이때, 리스트 정보는 메모리부(210)에 저장된 각 이펙트 영상의 대표 프레임에 대한 썸네일 정보를 포함할 수 있다.
여기서, 상기 이펙트 영상은 사용자가 강조하고자 하는 프레임에 대한 이펙트를 제공하기 위한 영상으로서, 동영상 클립, 플래시, 애니메이션 파일과 같은 다양한 포맷의 영상이 포함될 수 있을 뿐만 아니라 다양한 동영상 편집 프로그램을 통해 생성된 전용 동영상 템플릿을 포함할 수도 있으며 이에 한정되는 것은 아니다.
또한, 상기 이펙트 선택부(130)는 통신부(220)를 통해 이펙트 영상을 제공하는 서버와 통신하여 상기 서버로부터 상기 리스트 정보를 수신한 후 상기 리스트 정보에서 사용자 입력에 따라 선택된 이펙트 영상을 상기 서버로부터 다운로드할 수 있으며, 다운로드된 이펙트 영상을 메모리부(210)에 저장할 수 있다.
더하여, 상기 이펙트 선택부(130)는 재생부(120)와 연동하여 사용자 입력에 따라 선택된 이펙트 영상을 재생할 수 있으며, 상기 재생부(120)는 재생되는 이펙트 영상을 상기 출력부(250)를 통해 출력할 수 있다.
상술한 구성에서, 상기 프레임 추출부(110)가 상기 이펙트 선택부(130)를 활성화시키는 것으로 설명하였으나, 상기 이펙트 선택부(130)가 사용자 입력을 기초로 이펙트 영상을 선택한 후 상기 프레임 추출부(110)를 활성화시켜 상기 프레임 추출부(110)를 통한 선택 프레임의 추출 및 선택 프레임 정보의 생성이 이루어지도록 구성될 수도 있음은 물론이다.
상술한 구성에 따라, 도 3에 도시된 바와 같이 이펙트 선택부(130)는 리스트 정보에서 사용자 입력에 따라 선택된 이펙트 영상을 추출하여 상기 프레임 삽입부(140)로 제공할 수 있다.
이후, 프레임 삽입부(140)는 특정 프레임에 이펙트 영상에 따른 이펙트를 부여할 수 있는데 이를 도 4를 통해 상세히 설명한다.
우선, 도 4(a)에 도시된 바와 같이 상기 프레임 삽입부(140)는 상기 프레임 추출부(110)로부터 수신되는 동영상 및 선택 프레임 정보를 기초로 동영상의 전체 재생 구간(n)에서 선택 프레임을 식별할 수 있다.
이후, 도 4(b)에 도시된 바와 같이 프레임 삽입부(140)는 상기 이펙트 선택부(130)로부터 제공된 이펙트 영상의 전체 재생 구간(a)을 인식할 수 있다.
이에 따라, 도 4(c)에 도시된 바와 같이 상기 프레임 삽입부(140)는 상기 선택 프레임 정보에 따른 선택 프레임(프레임 10)을 복제하여 하나 이상의 복제 프레임을 생성하고, 상기 선택 프레임의 재생 시점 이후에 상기 각 복제 프레임을 삽입하여 상기 이펙트 영상의 전체 재생 구간에 대응되는 재생길이(a)를 가지며 상기 선택 프레임 및 복제 프레임으로 구성되는 이펙트 구간(a)을 상기 동영상에 삽입하여 추가할 수 있다.
이때, 상기 프레임 삽입부(140)는 상기 하나 이상의 복제 프레임만으로 상기 이펙트 구간을 구성할 수도 있다.
또한, 상기 이펙트 영상의 전체 재생 구간과 상기 이펙트 구간은 동일한 재생길이(재생시간)를 가질 수 있으며, 상기 동영상의 전체 재생 구간은 상기 이펙트 구간에 의해 늘어나게(길어지게) 된다.
한편, 상기 프레임 삽입부(140)는 이펙트 구간의 시작 프레임 및 종료 프레임을 지정하거나 재생 시작 시점 및 재생 종료 시점을 지정하여 상기 이펙트 구간이 삽입된 동영상의 헤더정보에 추가하거나, 별도의 이펙트 구간에 대한 이펙트 정보를 생성한 후 상기 렌더링부(150)로 제공할 수도 있다.
이를 통해, 이펙트 영상의 재생길이에 대응되는 이펙트 구간을 생성하여 이펙트 영상이 재생되는 구간을 확보할 수 있으며, 선택 프레임이 동영상의 마지막에 위치하는 경우라도 동영상의 재생길이에 관계없이 이펙트 영상에 따른 모든 이펙트 프레임이 재생되도록 하여 이펙트 영상이 도중에 끊기지 않고 적용될 수 있다.
또한, 프레임 삽입부(140)는 사용자가 강조하고자 하는 선택 프레임과 동일한 복수의 동일 프레임으로 구성된 이펙트 구간을 생성하여, 이펙트 구간의 재생시 이펙트 영상에 의해 강조되는 선택 프레임에서 재생이 정지된 것처럼 보이도록 하여 동영상의 프레임을 이펙트 영상에 의한 이펙트 효과 이외에도 정지 효과를 통한 프레임의 강조가 이루어지도록 할 수 있다.
이후, 도 4(d)에 도시된 바와 같이 렌더링부(150)는 이펙트 구간이 삽입된 동영상과 상기 이펙트 영상을 수신하며, 상기 동영상의 헤더정보 또는 이펙트 정보를 기초로 이펙트 구간에 대응되는 하나 이상의 프레임(프레임 10)을 추출 또는 선택할 수 있으며, 상기 이펙트 영상에 포함된 각 이펙트 프레임(프레임 E1~En)을 추출할 수 있다.
이때, 상기 렌더링부(150)는 동영상 및 이펙트 영상 각각에 대하여 프레임 또는 이펙트 프레임 추출을 위한 디코더가 구성될 수 있다.
다음, 상기 렌더링부(150)는 도시된 바와 같이 상기 이펙트 구간에 포함된 각 프레임(프레임 10)과 상기 이펙트 영상에 포함된 이펙트 프레임(E1~En)을 재생순서에 따라 순차적으로 합성하여 렌더링함으로써 합성 프레임을 생성할 수 있다.
이때, 상기 렌더링부(150)는 상기 이펙트 구간에 포함된 각 프레임(프레임 10)과 상기 이펙트 영상의 각 이펙트 프레임(프레임 E1~En)을 재생 순서에 따라 프레임별로 상호 동기화하여 서로 합성 및 렌더링함으로써, 이펙트 구간에 하나 이상의 합성 프레임을 생성할 수 있다.
이에 따라, 상기 렌더링부(150)는 도 5에 도시된 바와 같이 상기 동영상의 이펙트 구간에 하나 이상의 합성 프레임이 적용되어 생성된 합성 동영상을 생성할 수 있다. 이때, 상기 합성 동영상은 도시된 바와 같이 이펙트 구간에 하나 이상의 합성 프레임이 위치하며, 이펙트 구간 이외의 재생 구간에 하나 이상의 상기 동영상에 대응되는 프레임이 위치하도록 구성될 수 있다.
한편, 상기 렌더링부(150)는 상기 사용자 인터페이스부(240)를 통한 사용자 입력에 따라 상기 재생부(120)와 연동하여 상기 합성 동영상을 미리보기 형태로 제공하여 재생할 수 있으며, 상기 재생부(120)를 통해 재생되는 합성 동영상이 상기 출력부(250)를 통해 출력될 수 있다.
이를 통해, 본 발명의 실시예에 따른 동영상 이펙트 적용 장치(100)는 동영상에 이펙트 영상이 정확하게 적용되었는지 여부를 사용자가 판단할 수 있도록 제공한다.
또한, 상기 렌더링부(150)는 상기 합성 동영상 생성 이전에 상기 동영상과 이펙트 영상의 해상도가 일치하지 않는 경우 리사이징을 통해 상기 동영상과 이펙트 영상에 각각 포함된 프레임 및 이펙트 프레임의 해상도를 조절하여 동영상과 이펙트 영상의 해상도를 상호 일치시킬 수도 있다.
한편, 상기 렌더링부(150)는 상기 합성 동영상을 인코딩부(160)로 제공할 수 있으며, 상기 인코딩부(160)는 미리 설정된 코덱을 이용하여 합성 동영상을 인코딩할 수 있다.
또한, 상기 인코딩부(160)는 사용자 인터페이스부(240)를 통한 사용자 입력에 따라 상기 합성 동영상을 서버에 전송하기 위한 포맷으로 인코딩할 수 있으며, 상기 통신부(220)를 통해 인코딩된 합성 동영상을 서버로 전송할 수 있다.
이에 따라, 본 발명의 실시예에 따른 동영상 이펙트 적용 장치(100)는 메신저 서버, 클라우드 서버와 같은 다양한 서버를 통해 합성 동영상을 다른 사용자와 공유할 수 있도록 지원한다.
한편, 상기 음성추출부(170)는 상기 프레임 삽입부(140)로부터 상기 동영상에 대응되는 음성정보 및 이펙트 영상에 대응되는 이펙트 음성정보를 추출하며, 상기 동영상의 헤더정보 또는 이펙트 정보를 기초로 상기 이펙트 구간을 인식하여 상기 이펙트 구간에서 상기 이펙트 음성정보가 출력되도록 상기 이펙트 음성정보의 재생구간을 상기 이펙트 구간의 재생 시작 시점 및 재생 종료 시점으로 조정한 갱신 이펙트 음성정보를 생성할 수 있다.
또한, 상기 음성추출부(170)는 동영상의 음성정보에서 상기 이펙트 구간에 대응되는 음성재생 구간을 상기 이펙트 구간 이후에 재생되도록 조정한 갱신 음성정보를 생성할 수 있다.
이후, 상기 갱신 음성정보와 갱신 이펙트 음성정보를 상기 인코딩부(160)로 전송할 수 있다.
이에 따라, 상기 인코딩부(160)는 상기 음성추출부(170)로부터 제공되는 갱신 음성정보와 갱신 이펙트 음성정보를 재생순서에 따라 상기 합성 동영상과 함께 인코딩하여 최종 동영상 파일을 생성할 수 있다.
이때, 상기 인코딩부(160)는 상기 최종 동영상 파일을 메모리부(210)에 저장할 수 있다.
또한, 상기 재생부(120)는 상기 사용자 인터페이스부(240)를 통한 사용자 입력에 따라 상기 최종 동영상 파일을 로드하여 재생할 수 있으며, 재생되는 최종 동영상 파일을 출력부(250)를 통해 출력할 수 있다.
이와 같이, 본 발명의 실시예에 따른 동영상 이펙트 적용 장치(100)는 동영상에서 사용자가 강조하고자 하는 선택 프레임을 이펙트 영상의 재생길이만큼 복제하여 강조하고자 하는 선택 프레임과 동일한 프레임이 연속 재생되도록 하여 화면이 정지된 것과 같은 강조 효과를 제공하며, 정지된 화면 상에서 이펙트 영상이 재생되도록 하여 사용자가 강조하고자 하는 선택 프레임을 정지시킨 상태로 이펙트 영상의 재생을 통해 부각시킬 수 있다.
이러한 본 발명의 구성은 사용자가 부각시키고자 하는 화면이 순간적으로 정지되면서 이펙트 영상을 통해 해당 정지화면에 대한 이펙트를 제공하여, 동영상에 나타나는 특정 표정에 나타나는 감정상태나 표현 등을 이펙트 영상을 통해 더욱 강조하여 동영상의 표현 방식을 다양하게 확장시킬 수 있다.
또한, 본 발명의 구성은 이펙트를 적용하고자 하는 선택 프레임을 복제하여 정지화면이 이펙트 영상의 재생동안 이어지도록 함으로써, 사용자의 특정 표정을 더욱 부각시키는 동시에 해당 정지화면에 이펙트 영상을 가미하여 사용자의 감정상태나 표현, 강조하고자 하는 특정 부분을 크게 부각시킬 수 있다.
더하여, 본 발명의 구성은 이펙트 영상의 재생길이만큼 이펙트가 적용되는 선택 프레임을 복제하여 동영상의 전체 재생 구간을 늘이도록 구성되므로, 이를 통해 선택 프레임이 상기 동영상의 마지막에 위치하는 경우라도 상기 동영상에서 이펙트 영상의 재생을 위한 이펙트 재생 구간을 확보하여 이펙트 영상이 도중에 끊기지 않고 완전히 재생되도록 지원함으로써 이펙트 적용 효과를 극대화한다.
도 6은 상술한 구성에 따라 생성된 합성 동영상에 대한 예시도로서, 도시된 바와 같이 동영상 이펙트 적용 장치(100)는 합성 동영상의 재생시 상기 선택 프레임인 프레임 10 이전까지는 동영상의 프레임이 재생되면서, 이후 선택 프레임인 프레임 10의 재생 시점에 합성 프레임 1이 시작되면서 선택 프레임 상에서 이펙트 동영상이 재생되도록 한다.
이를 통해, 동영상에 포함된 특정 프레임을 이펙트 영상을 통해 강조함으로써, 사용자의 감정상태나 특정 장면 또는 영역을 부각시킬 수 있다.
예를 들어, 프레임 10부터 분노하는 표정이 나타나는 경우 프레임 10을 연속 재생하여 분노 표정을 정지시키면서, 분노 표정의 바탕에 화산이 폭발하는 등의 이펙트 영상이 재생되어 분노 표정을 더욱 강조할 수 있다.
이후, 동영상 이펙트 적용 장치(100)는 합성 동영상에서 상기 이펙트 구간의 재생이 종료되면, 동영상의 프레임인 프레임 11부터 재생되어 다시 동영상의 프레임이 상기 이펙트 구간 이후에 연속 재생되도록 할 수 있다.
이와 같이, 동영상 이펙트 적용 장치(100)는 동영상의 특정 프레임을 정지시킨 효과를 주면서 해당 특정 프레임 상에서 이펙트 영상이 재생되도록 하고, 이펙트 영상이 종료되면 다시 동영상이 재생되도록 함으로써 동영상과 이펙트 영상의 연결이 부드럽게 이어지도록 할 수 있다.
더하여, 상술한 바와 같이 동영상 이펙트 적용 장치(100)는 이펙트 구간에서 이펙트 영상의 음성이 출력되도록 할 수 있으며, 동영상과 이펙트 영상에 포함된 음성정보에 대한 별도의 합성 과정이 필요 없으므로 합성 동영상의 생성 과정이 간편하며 부하를 크게 줄일 수 있다.
도 7은 본 발명의 실시예에 따른 동영상 이펙트 적용 장치(100)의 다른 실시예를 도시한 구성도로서, 도시된 바와 같이 동영상 이펙트 적용 장치(100)는 상기 선택 프레임에서 전경과 배경을 분리하고, 상기 이펙트 영상의 상기 선택 프레임에 대한 배치를 조정하는 검출부(180)를 더 포함할 수 있다.
상기 검출부(180)는 상기 프레임 추출부로부터 선택 프레임 정보를 수신하여 상기 선택 프레임에서 미리 설정된 알고리즘에 따라 전경 및 배경을 분리하고, 분리된 전경 또는 배경에 대한 전경정보 또는 배경정보를 이펙트 선택부(130)로 제공할 수 있다.
이때, 검출부(180)는 선택 프레임에서 얼굴을 인식하여 얼굴에 해당하는 얼굴 영역을 분리하고, 해당 얼굴 영역을 전경정보로 생성할 수도 있다.
한편, 상기 이펙트 영상은 전경 및 배경 중 어느 하나에 대응되어 구분될 수 있으며, 상기 이펙트 선택부(130)는 이펙트 영상 중 상기 검출부(180)로부터 수신된 전경정보 또는 배경정보에 따라 전경 및 배경 중 어느 하나에 대응되는 하나 이상의 이펙트 정보를 제공할 수 있다.
또 다른 예로서, 상기 검출부(180)는 상기 이펙트 선택부(130)를 통해 선택된 이펙트 영상에 포함되는 복수의 이펙트 프레임 중 어느 하나로부터 공백영역을 검출하여 공백정보를 생성할 수 있다.
이때, 상기 이펙트 영상에 포함된 복수의 이펙트 프레임 중 가장 많은 효과가 나타나는 이펙트 프레임을 상기 대표 프레임으로 하는 대표 프레임 정보가 상기 이펙트 영상에 미리 설정될 수 있으며, 상기 대표 프레임은 상기 이펙트 영상의 썸네일로 사용됨은 상술한 바와 같다.
이에 따라, 상기 검출부(180)는 상기 대표 프레임 정보에 대응되는 대표 프레임에서 공백정보를 생성하고, 상기 전경정보와 공백정보를 비교하여 중복되는 영역이 가장 많도록 상기 대표 프레임의 사이즈 및 위치 중 적어도 하나를 조정할 수 있다.
이때, 상기 검출부(180)는 상기 선택 프레임의 바탕에 상기 대표 프레임이 오버레이 되도록 상기 출력부(250)를 통해 출력할 수 있으며, 상기 검출부(180)는 상기 사용자 인터페이스부(240)를 통한 사용자 입력에 따라 상기 선택 프레임을 바탕으로 상기 대표 프레임을 조정할 수도 있다.
또한, 상술한 구성에서 상기 검출부(180)는 상기 선택 프레임의 사이즈 및 위치를 조정할 수도 있음은 물론이다.
한편, 일례로 전경에 해당하는 얼굴영역이 전체 영상의 코너에 위치하고 있는 경우 등을 감안하여, 이펙트 영상을 구성하는 각 이펙트 프레임의 사이즈가 충분히 크도록 구성되는 것이 바람직하며, 이를 통해 상기 검출부(180)는 사이즈 및 위치 조정을 통해 상기 얼굴영역에 상기 공백영역을 맞추더라도 상기 선택 프레임의 나머지 영역에 상기 이펙트 프레임의 영역이 전체적으로 반영되도록 할 수 있다.
한편, 상기 검출부(180)는 적합한 합성 프레임의 사이즈에 대한 가이드 프레임이 미리 설정될 수 있으며, 상기 대표 프레임의 조정을 통해 가이드 프레임을 벗어나는 영역을 크롭(crop)하여, 합성 프레임의 사이즈에 대응되는 사이즈로 생성할 수 있다.
이에 따라, 상기 검출부(180)는 상기 대표 프레임의 조정 및 크롭에 따른 메타정보를 생성하며, 상기 메타정보에 따라 상기 대표 프레임에 대응되는 이펙트 영상의 모든 이펙트 프레임에 대해서 상기 대표 프레임과 동일한 조정 및 크롭을 수행하여 갱신된 이펙트 영상을 이펙트 선택부(130)로 제공할 수 있다.
또한, 상기 검출부(180)는 상기 선택 프레임에 대해서도 가이드 프레임을 벗어나는 영역을 크롭할 수 있음은 당연하며, 상기 선택 프레임의 조정 및 크롭에 대해서 메타정보를 생성하고, 해당 메타정보를 기초로 동영상의 모든 프레임에 대해서 상기 선택 프레임과 동일한 조정 및 크롭을 수행하여 갱신된 동영상을 상기 프레임 추출부(110)로 제공할 수 있다.
상술한 바에 따라, 프레임 추출부(110) 및 이펙트 선택부(130)는 갱신 이전의 이펙트 영상 및 동영상 대신 상기 검출부(180)를 통해 갱신된 이펙트 영상 및 갱신된 동영상을 상술한 내용에 따라 프레임 삽입부(140)로 제공하여 동영상의 얼굴 영역과 이펙트 영상의 공백 영역이 가장 많이 중복되어 합성되도록 지원할 수 있으며, 그 결과 얼굴 영역을 피해서 이펙트 영상이 합성되도록 할 수 있어, 얼굴 영역을 부각시켜 이펙트 효과를 극대화할 수 있다.
한편, 상술한 구성을 바탕으로, 도 8에 도시된 바와 같이 상기 동영상 이펙트 적용 장치(100)는 동영상에 복수의 이펙트 구간을 생성하고, 각 이펙트 구간에 서로 다른 이펙트 동영상을 합성할 수도 있다.
본 발명의 실시예에 따른 동영상 이펙트 적용 장치(100)는 도 2에 도시된 바와 같이 상술한 구성을 바탕으로 생성된 합성 동영상을 공유하기 위한 메신저부(190)를 더 포함할 수 있다.
또한, 상기 프레임 추출부(110), 재생부(120), 이펙트 선택부(130), 프레임 삽입부(140), 렌더링부(150), 인코딩부(160), 음성추출부(170) 및 검출부(180)는 하나의 합성 동영상 생성부(101)로 구성될 수도 있으며, 상기 합성 동영상 생성부(101)는 상기 메신저부(190)와 상호 연동할 수 있다.
이때, 상기 프레임 추출부(110), 재생부(120), 이펙트 선택부(130), 프레임 삽입부(140), 렌더링부(150), 인코딩부(160), 음성추출부(170) 및 검출부(180)가 각각 개별 구성되어 상기 메신저부(190)와 상호 통신하여 연동할 수 있음은 물론이다.
상기 메신저부(190)는 상기 메모리부(210)에 저장된 하나 이상의 타사용자 장치에 대응되는 전화번호, 이메일 등에 대한 연락정보를 포함하는 주소록 정보와 동기화되어 상기 주소록 정보를 저장하며, 상기 주소록 정보 중 사용자 입력에 따라 선택된 연락정보로 메시지, 음성정보, 동영상 정보를 통신부(220)를 통해 전송할 수 있다.
또한, 상기 메신저부(190)는 사용자 입력에 따라 상기 합성 동영상 생성부(101)를 제어하여 상술한 합성 동영상의 생성에 필요한 상기 선택 프레임의 선택, 상기 동영상 및 합성 동영상의 재생, 상기 동영상에 합성되는 이펙트 영상의 선택, 상기 동영상에 대한 이펙트 영상의 조정 등을 포함하는 상술한 모든 과정을 수행할 수 있으며, 이를 통해 생성된 합성 동영상에 대응되는 상기 최종 동영상 파일을 상기 합성 동영상 생성부(101)로부터 수신할 수 있다.
더하여, 상기 메신저부(190)는 상기 합성 동영상 생성부(101)의 프레임 추출부(110)와 연동하여 상기 최종 동영상 파일에 포함된 합성 프레임 중 하나를 대표 합성 프레임으로 선택하며, 상기 합성 동영상 생성부(101)의 상기 프레임 삽입부(140)와 연동하여 상기 선택된 대표 합성 프레임을 복제하여 상기 최종 동영상 파일의 첫번째 프레임으로 추가 삽입할 수 있다.
일례로, 상기 메신저부(190)는 상기 프레임 추출부(110) 및 상기 프레임 삽입부(140)와 연동하여, 상기 최종 동영상 파일에 포함된 상기 합성 프레임 중 상기 사용자 인터페이스부(240)를 통한 사용자 입력에 따라 선택된 대표 합성 프레임을 복제하여 상기 최종 동영상 파일의 첫번째 프레임으로 추가 삽입할 수 있다.
이후, 상기 메신저부(190)는 상기 렌더링부(150) 및 인코딩부(160)를 통해 상기 대표 합성 프레임이 추가 삽입된 최종 동영상 파일을 수신할 수 있다.
이에 따라, 상기 메신저부(190)는 상기 대표 합성 프레임을 상기 최종 동영상 파일의 썸네일로 표시되도록 할 수 있다.
한편, 상기 메신저부(190)는 사용자 인터페이스부(240)를 통한 사용자 입력에 따라 상기 통신부(220)를 통해 상기 최종 동영상 파일을 상기 선택된 연락정보에 대응되는 타사용자 장치로 전송할 수 있다.
또한, 상기 타사용자 장치에 상기 동영상 이펙트 적용 장치(100)가 구성될 수 있으며, 상기 타사용자 장치에 구성된 상기 동영상 이펙트 적용 장치(100)에 포함되는 상기 메신저부(190)는 상기 최종 동영상 파일 수신시 상기 재생부(120)를 통해 상기 최종 동영상 파일을 자동 재생하여 상기 타사용자 장치에 구성된 출력부를 통해 상기 최종 동영상 파일이 출력되도록 할 수 있다.
더하여, 상기 타사용자 장치에 구성된 상기 동영상 이펙트 적용 장치(100)는 상기 최종 동영상 파일의 재생완료 후에 상기 최종 동영상 파일의 상기 대표 합성 프레임을 썸네일로 표시할 수 있으며, 이를 통해 최종 동영상 파일의 재생이 완료된 이후에도 대표 합성 프레임이 표시되어 최종 동영상 파일에 대응되는 이펙트 효과를 이모티콘과 같은 형태로 표시할 수 있다.
상술한 바와 같은 구성을 통해, 상기 동영상 이펙트 적용 장치(100)는 사용자간 합성 동영상을 상호 공유할 수 있도록 제공한다.
한편, 상술한 실시예에서 동영상 이펙트 적용 장치(100)가 사용자 장치(1)에 구성된 경우를 예시하였으나, 본 발명의 실시예에 따른 동영상 이펙트 적용 장치(100)는 서버에 구성될 수도 있다.
이를 도 9를 통해 설명하면, 상기 동영상 이펙트 적용 장치(100)는 사용자 장치(1)와 통신망을 통해 통신하여 회원 DB(340)에서 사용자 장치(1)에 대응되는 회원정보를 기초로 동영상 DB(310)에서 사용자 장치(1)에 대응되는 동영상을 선택하거나 사용자 장치(1)로부터 동영상을 수신할 수 있다.
일례로, 상술한 동영상 이펙트 적용 장치(100)를 구성하는 각 구성부(110, 120, 130, 140, 150, 160, 170, 180, 190)는 서버에 구성되는 경우 서버에 구성된 통신부를 통해 사용자 장치(1)와 상호 통신하여 동영상, 사용자 입력정보 및 선택정보를 수신할 수 있다.
이후, 동영상 이펙트 적용 장치(100)는 사용자 장치(1)로부터 수신되는 선택정보를 기초로 동영상에서 선택된 선택 프레임 및 이펙트 영상 DB(320)에 저장된 하나 이상의 이펙트 영상 중 상기 선택정보를 기초로 선택된 이펙트 영상을 추출할 수 있다.
이를 통해, 상술한 구성과 마찬가지로 상기 동영상 이펙트 적용 장치(100)는 합성 동영상을 생성하여 합성 동영상 DB(330)에 저장할 수 있다.
또한, 상기 동영상 이펙트 적용 장치(100)는 메신저 서버나 클라우드 서버와 같은 공유 서버로 구성되어, 상기 합성 동영상을 타사용자 장치(2)로 전송하여 사용자간 합성 동영상을 상호 공유하도록 제공할 수 있다.
더하여, 상기 동영상 이펙트 적용 장치(100)는 상술한 구성에 따라 사용자 장치(1)에 대응되어 인코딩된 합성 동영상 또는 최종 동영상 파일을 생성하여 합성 동영상 DB(330)에 저장하고, 상기 인코딩된 합성 동영상 또는 최종 동영상 파일을 타사용자 장치(2)로 전송할 수도 있다.
도 10은 본 발명의 실시예에 따른 동영상 이펙트 적용 방법에 대한 순서도로서, 도시된 바와 같이 동영상 이펙트 적용 장치(100)는 미리 저장된 동영상을 구성하는 프레임 중 어느 하나와 미리 저장된 이펙트 영상 중 하나를 선택할 수 있다(S1).
이후, 동영상 이펙트 적용 장치(100)는 상기 동영상에서 선택된 선택 프레임을 복제한 후(S2) 상기 선택 프레임의 재생시점 이후에 재생되도록 상기 동영상에 삽입하여 상기 이펙트 영상의 전체 재생 구간에 대응되는 이펙트 구간을 상기 동영상에 생성할 수 있다(S3).
다음, 동영상 이펙트 적용 장치(100)는 상기 이펙트 구간에 포함된 각 프레임에 상기 이펙트 영상에 포함된 복수의 이펙트 프레임을 재생 순서에 따라 순차 합성 및 렌더링하여(S4) 합성 동영상을 생성할 수 있다(S5).
이후, 동영상 이펙트 적용 장치(100)는 상기 합성 동영상을 미리 설정된 코덱으로 인코딩할 수 있다(S6).
이상에서는 본 발명에 따른 바람직한 실시예들에 대하여 도시하고 또한 설명하였다. 그러나 본 발명은 상술한 실시예에 한정되지 아니하며, 특허 청구의 범위에서 첨부하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능할 것이다.
1: 사용자 장치 2: 타사용자 장치
100: 동영상 이펙트 적용 장치 101: 합성 동영상 생성부
110: 프레임 추출부 120: 재생부
130: 이펙트 선택부 140: 프레임 삽입부
150: 렌더링부 160: 인코딩부
170: 음성추출부 180: 검출부
190: 메신저부 210: 메모리부
220: 통신부 230: 카메라부
240: 사용자 인터페이스부 250: 출력부
310: 동영상 DB 320: 이펙트 영상 DB
330: 합성동영상 DB 340: 회원 DB

Claims (12)

  1. 동영상에서 선택된 선택 프레임을 추출하는 프레임 추출부;
    상기 선택 프레임에 적용되는 이펙트 영상을 선택하는 이펙트 선택부;
    상기 선택 프레임에서 전경에 해당하는 전경 영역을 검출하며, 상기 이펙트 선택부를 통해 선택된 이펙트 영상의 이펙트 프레임 중 어느 하나로부터 공백 영역을 검출하는 검출부;
    상기 이펙트 영상의 전체 재생 구간에 대응되도록 상기 선택 프레임을 복제하여 생성된 하나 이상의 복제 프레임을 상기 동영상에서 상기 선택 프레임의 재생 시점 이후에 삽입하여 상기 동영상에 이펙트 구간을 생성하는 프레임 삽입부; 및
    상기 이펙트 구간에 포함된 각 프레임에 상기 이펙트 영상을 구성하는 각 이펙트 프레임을 재생 순서에 따라 순차 합성 및 렌더링하여 합성 동영상을 생성하는 렌더링부를 포함하고,
    상기 검출부는 상기 전경 영역과 상기 공백 영역이 가장 많이 중복되도록 상기 이펙트 영상에 포함된 각 이펙트 프레임의 사이즈 및 위치 중 적어도 하나를 조정하여 상기 이펙트 영상을 갱신시키는 것을 특징으로 하는 동영상 이펙트 적용 장치.
  2. 청구항 1에 있어서,
    상기 합성 동영상을 미리 설정된 코덱으로 인코딩하는 인코딩부를 더 포함하는 것을 특징으로 하는 동영상 이펙트 적용 장치.
  3. 청구항 2에 있어서,
    미리 저장된 하나 이상의 연락정보 중 선택된 연락정보로 인코딩된 합성 동영상을 전송하는 메신저부를 더 포함하는 것을 특징으로 하는 동영상 이펙트 적용 장치.
  4. 청구항 3에 있어서,
    상기 메신저부는 상기 프레임 추출부와 연동하여 상기 합성 동영상에 대응되는 최종 동영상 파일에 포함된 합성 프레임 중 하나를 대표 합성 프레임으로 선택하며, 상기 프레임 삽입부와 연동하여 선택된 상기 대표 합성 프레임을 복제한 후 상기 최종 동영상 파일의 첫번째 프레임으로 추가 삽입하여 상기 대표 합성 프레임이 상기 최종 동영상 파일의 썸네일로 표시되도록 하는 것을 특징으로 하는 동영상 이펙트 적용 장치.
  5. 청구항 2에 있어서,
    상기 동영상에 대응되는 음성정보 및 상기 이펙트 영상에 대응되는 이펙트 음성정보를 추출하여 상기 이펙트 구간에서 상기 이펙트 음성정보가 출력되도록 상기 이펙트 음성정보의 재생구간을 상기 이펙트 구간의 재생 시작 시점 및 재생 종료 시점으로 조정하여 갱신 이펙트 음성 정보를 생성하며, 상기 동영상에 대응되는 음성정보 중 상기 이펙트 구간에 대응되는 재생구간을 상기 이펙트 구간 이후에 재생되도록 조정하여 갱신 음성 정보를 생성한 후 상기 인코딩부에 제공하여 상기 합성 동영상과 함께 인코딩되도록 하는 음성 추출부를 더 포함하는 것을 특징으로 하는 동영상 이펙트 적용 장치.
  6. 청구항 1에 있어서,
    상기 이펙트 영상은 동영상 클립, 플래시 및 동영상 템플릿 중 어느 하나인 것을 특징으로 하는 동영상 이펙트 적용 장치.
  7. 청구항 1에 있어서,
    상기 동영상, 이펙트 영상 및 합성 동영상 중 어느 하나를 재생하는 재생부를 더 포함하는 것을 특징으로 하는 동영상 이펙트 적용 장치.
  8. 청구항 7에 있어서,
    상기 재생부는 상기 동영상에서 선택된 재생 시점에 대응되는 프레임에 대한 스틸 이미지 또는 썸네일 이미지를 제공하는 것을 특징으로 하는 동영상 이펙트 적용 장치.
  9. 청구항 1에 있어서,
    촬영을 통해 상기 동영상을 생성하는 카메라부를 더 포함하는 것을 특징으로 하는 동영상 이펙트 적용 장치.
  10. 청구항 1에 있어서,
    하나 이상의 상기 이펙트 영상을 저장하는 저장부를 더 포함하는 것을 특징으로 하는 동영상 이펙트 적용 장치.
  11. 삭제
  12. 동영상 이펙트 적용 장치가 미리 저장된 동영상을 구성하는 프레임 중 어느 하나와 미리 저장된 이펙트 영상 중 하나를 선택하는 단계;
    상기 동영상 이펙트 적용 장치가 선택된 상기 프레임에서 전경에 해당하는 전경 영역을 검출하고, 선택된 상기 이펙트 영상의 이펙트 프레임 중 어느 하나로부터 공백 영역을 검출한 후, 상기 전경 영역과 상기 공백 영역이 가장 많이 중복되도록 상기 이펙트 영상에 포함된 각 이펙트 프레임의 사이즈 및 위치 중 적어도 하나를 조정하여 상기 이펙트 영상을 갱신시키는 단계;
    상기 동영상 이펙트 적용 장치가 상기 동영상에서 선택된 선택 프레임을 복제한 후 상기 선택 프레임의 재생시점 이후에 재생되도록 상기 동영상에 삽입하여 상기 이펙트 영상의 전체 재생 구간에 대응되는 이펙트 구간을 상기 동영상에 생성하는 단계;
    상기 동영상 이펙트 적용 장치가 상기 이펙트 구간에 포함된 각 프레임에 상기 이펙트 영상에 포함된 각 이펙트 프레임을 재생 순서에 따라 순차 합성 및 렌더링하여 합성 동영상을 생성하는 단계; 및
    상기 동영상 이펙트 적용 장치가 상기 합성 동영상을 미리 설정된 코덱으로 인코딩하는 단계
    를 포함하는 동영상 이펙트 적용 방법.
KR1020140063267A 2014-05-26 2014-05-26 동영상 이펙트 적용 장치 및 방법 KR101571687B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140063267A KR101571687B1 (ko) 2014-05-26 2014-05-26 동영상 이펙트 적용 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140063267A KR101571687B1 (ko) 2014-05-26 2014-05-26 동영상 이펙트 적용 장치 및 방법

Publications (1)

Publication Number Publication Date
KR101571687B1 true KR101571687B1 (ko) 2015-11-25

Family

ID=54845762

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140063267A KR101571687B1 (ko) 2014-05-26 2014-05-26 동영상 이펙트 적용 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101571687B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101721155B1 (ko) * 2016-10-24 2017-04-10 주식회사 인디비쥬얼 동영상 클립 공유 서비스 시스템 및 방법
KR101897692B1 (ko) * 2017-05-17 2018-10-29 유한회사 이노레드 프레임 분리 방식을 이용한 영상 합성 서버
US11589091B2 (en) 2017-09-08 2023-02-21 Tencent Technology (Shenzhen) Company Limited Video information processing method, computer equipment and storage medium
JP7465487B2 (ja) 2021-07-27 2024-04-11 ダナル エンターテインメント カンパニー リミテッド エモーティコン生成装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3356520B2 (ja) 1993-12-28 2002-12-16 松下電器産業株式会社 映像編集装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3356520B2 (ja) 1993-12-28 2002-12-16 松下電器産業株式会社 映像編集装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101721155B1 (ko) * 2016-10-24 2017-04-10 주식회사 인디비쥬얼 동영상 클립 공유 서비스 시스템 및 방법
KR101897692B1 (ko) * 2017-05-17 2018-10-29 유한회사 이노레드 프레임 분리 방식을 이용한 영상 합성 서버
US11589091B2 (en) 2017-09-08 2023-02-21 Tencent Technology (Shenzhen) Company Limited Video information processing method, computer equipment and storage medium
JP7465487B2 (ja) 2021-07-27 2024-04-11 ダナル エンターテインメント カンパニー リミテッド エモーティコン生成装置

Similar Documents

Publication Publication Date Title
KR102543988B1 (ko) 비디오 제작 방법 및 장치, 컴퓨터 디바이스 및 저장 매체
KR101492359B1 (ko) 입력 지원 장치, 입력 지원 방법 및 기록 매체
CN107770626A (zh) 视频素材的处理方法、视频合成方法、装置及存储介质
KR20100113266A (ko) 휴대용 단말기에서 3차원 영상 메시지 제작 방법 및 장치
KR101571687B1 (ko) 동영상 이펙트 적용 장치 및 방법
WO2016202176A1 (zh) 一种媒体文件合成方法、装置和设备
US20140205261A1 (en) Interactive audio/video system and method
KR20030003085A (ko) 콘텐츠 전송 시스템 및 전송 방법
JP4981370B2 (ja) 動画生成システム、及び動画生成方法
KR100901111B1 (ko) 삼차원 가상 공간 콘텐츠를 이용한 영상제공시스템
JP2010157906A (ja) 映像表示装置
JP6727106B2 (ja) 画像音響処理装置および画像音響処理方法、プログラム
KR102510892B1 (ko) 발화 영상 제공 방법 및 이를 수행하기 위한 컴퓨팅 장치
JP2014220572A (ja) コンテンツ配信システム、配信装置、受信端末、配信プログラム、及び受信プログラム
JP6569876B2 (ja) コンテンツ生成方法及び装置
US10616724B2 (en) Method, device, and non-transitory computer-readable recording medium for supporting relay broadcasting using mobile device
WO2017051955A1 (ko) 동영상 이펙트 적용 장치 및 방법
JP5894505B2 (ja) 画像コミュニケーションシステム、画像生成装置及びプログラム
US12087328B2 (en) Moving image editing device, moving image editing method, and program
WO2021049048A1 (ja) 映像提供システムおよびプログラム
KR20200005966A (ko) 중계 서버, 컨텐츠 생성 장치 및 이들을 포함하는 컨텐츠 생성 시스템
KR102035225B1 (ko) 멀티 콘텐츠 노트를 제공하는 방법 및 이를 위한 장치
JP5777233B1 (ja) 動画生成装置及び動画生成方法
KR102625045B1 (ko) 영상 편집 장치, 영상 편집 방법 및 컴퓨터 프로그램
WO2018129585A1 (en) A computer system and a computer implemented method for providing a customized video to a user

Legal Events

Date Code Title Description
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20181119

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20191119

Year of fee payment: 5