KR100860510B1 - 모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성방법 - Google Patents

모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성방법 Download PDF

Info

Publication number
KR100860510B1
KR100860510B1 KR1020070039408A KR20070039408A KR100860510B1 KR 100860510 B1 KR100860510 B1 KR 100860510B1 KR 1020070039408 A KR1020070039408 A KR 1020070039408A KR 20070039408 A KR20070039408 A KR 20070039408A KR 100860510 B1 KR100860510 B1 KR 100860510B1
Authority
KR
South Korea
Prior art keywords
data
image data
visual effect
user
slide show
Prior art date
Application number
KR1020070039408A
Other languages
English (en)
Inventor
주영주
조원양
이상권
Original Assignee
엠엠비 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엠엠비 주식회사 filed Critical 엠엠비 주식회사
Priority to KR1020070039408A priority Critical patent/KR100860510B1/ko
Application granted granted Critical
Publication of KR100860510B1 publication Critical patent/KR100860510B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72427User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for supporting games or graphical animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording

Abstract

본 발명은 사진, 동영상, 음악 및 텍스트를 포함하는 슬라이드 쇼를 사용자가 원하는 방식에 따라 편집하고 편집된 슬라이드 쇼에 시각 효과를 부가하여 UCC(User Created Contents)를 생성할 수 있는 모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성 방법에 관한 것이다. 본 발명에 따른 슬라이드쇼 생성 방법은 모바일 장치에서 재생되는 슬라이드쇼를 생성하는 방법에 있어서, (a) 동영상 데이터에 포함된 하나 이상의 프레임 데이터 및 하나 이상의 연속된 프레임으로 구성되는 구간 영상 데이터 중 적어도 하나를 추출하는 단계; (b) 상기 추출된 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 사용자에게 제공하는 단계; (c) 상기 사용자가 선택한 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 배열하는 단계; (d) 상기 배열된 하나 이상의 프레임 데이터 또는 구간 영상 데이터에 시각 효과를 삽입하는 단계; 및 (e) 상기 시각 효과가 삽입된 상기 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 통합 슬라이드 쇼 데이터로 인코딩하는 단계를 포함한다.

Description

모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성 방법{METHOD FOR CREATING SLIDE SHOW HAVING VISUAL EFFECT IN MOBILE DEVICE}
도 1은 종래 기술에 따른 휴대단말기의 영상표시 방법을 도시한 흐름도.
도 2는 종래 기술에 따른 휴대단말기의 영상표시 장치를 도시한 블럭도.
도 3은 본 발명에 따른 슬라이드쇼 생성 방법을 도시한 흐름도.
본 발명은 모바일 장치에서 시각 효과가 삽입된 UCC를 생성하는 방법에 관한 것으로, 특히 사진, 동영상, 음악 및 텍스트를 포함하는 슬라이드 쇼를 사용자가 원하는 방식에 따라 편집하고 편집된 슬라이드 쇼에 시각 효과를 부가하여 UCC(User Created Contents)를 생성할 수 있는 모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성 방법에 관한 것이다.
휴대폰, PMP(Portable Media Player) 등의 모바일 장치의 보급에 따라 사용자들은 어디서나 동영상이나 사진을 감상할 수 있게 되었다. 최근에는, 동영상이나 사진의 감상뿐만 아니라 모바일 장치에 내장된 카메라를 이용하여 사용자가 직접 동영상이나 사진을 촬영할 수 있게 되었고, 사진들을 모아서 재생할 수 있는 단순 한 사진 슬라이드쇼 기능을 제공하기도 한다.
즉, UCC가 대중화되고 있으나, 모바일 장치는 카메라 등을 이용하여 촬영한 동영상이나 사진을 저장하는 단순한 저장장치로 활용되고 있는 실정이다.
또한, 모바일 장치의 저장 용량의 한계로 인하여, 카메라를 통하여 입력된 영상의 프레임을 일정 간격으로 추출하고 추출된 프레임에 오디오 신호를 부가하여 동영상의 용량을 감소시키는 방법이 제안되었다. 이러한 방법 중에 하나로 도 1 및 도 2에 도시된 특허출원 제2003-0083777호가 있다.
도 1은 종래 기술에 따른 휴대단말기의 영상표시 방법을 도시한 흐름도이며, 도 2는 종래 기술에 따른 휴대단말기의 영상표시 장치를 도시한 블록도이다.
도 1 및 도 2를 참조하면, 사용자는 키입력부27을 통해 동영상 및 오디오신호를 합성하기 위한 동영상모드를 수행하기 위한 명령어를 발생한다. 그러면 상기 제어부10은 411단계에서 동영상모드임을 감지하고, 413단계 및 415단계에서 카메라부40을 구동하여 촬영을 시작하고, 영상처리부50을 제어하여 상기 카메라부40에서 촬영되는 동영상신호의 JPEG 부호화 동작을 시작한다. 또한 데이터처리부20의 오디오코덱85를 구동하여 상기 동영상신호에 따른 오디오신호의 부호화 동작도 시작한다. 이때 상기 카메라부40에서 촬영되는 동영상신호는 상기 영상처리부50을 통해 표시부60에서 인가되어 표시된다.
상기 영상코덱80은 프레임크기의 영상데이타들을 JPEG 부호화한다. 따라서 상기 제어부10은 417단계 및 419단계를 수행하면서 상기 영상코덱80이 1화면(frame)의 영상데이타를 JPEG 부호화하는 동안 상기 오디오코덱85에서 출력되는 부호화된 오디오 데이터를 버퍼링한다. 이후 상기 JPEG 부호화된 1화면의 영상데이타가 수신되면 상기 제어부10은 419단계에서 이를 감지하고, 상기 417단계에서 버퍼링된 오디오 데이터를 억세스하며, 423단계에서 상기 JPEG 부호화된 영상데이타 및 오디오 데이터를 합성하기 위한 헤더를 생성한다. 이후 상기 제어부10은 425단계에서 상기 생성된 헤더, JPEG 부호화된 영상 데이터 및 상기 오디오 데이터를 합성한 후, 메모리30에 저장한다. 그리고 사용자가 동영상모드를 해제시킬 때까지 1화면 단위로 헤더, 영상데이타 및 오디오데이타를 합성되어 메모리30에 저장하는 상기와 같은 동작을 반복 수행한다.
따라서 상기 메모리30에 저장되는 합성 동영상데이타는 정지 영상데이타(JPEG1, JPEG2, ...)가 연속적으로 저장되며, 따라서 상기 메모리30에 저장된 정지 영상데이타는 동영상 형태가 된다. 이때 상기 부호화된 정지 영상데이타 JPEG1, JPEG2, JPEG3,...들은 상기한 바와 같이 영상코덱80의 부호화 능력에 따라 결정될 수 있다. 즉, 상기 카메라부40에서 1초에 20프레임의 영상데이타를 촬영할 수 있으며, 상기 영상코덱80이 1초에 5프레임의 영상데이타를 코딩할 수 있다고 가정하면, 상기 JPEG1은 카메라부40에서 출력되는 첫 번째 프레임의 영상데이타가 될 수 있으며, JPEG2는 상기 카메라부40에서 출력되는 5번째 프레임의 영상데이타가 될 수 있고, JPEG3은 상기 카메라부40에서 출력되는 9번째 프레임의 영상데이타가 될 수 있으며, JPEG4는 상기 카메라부40에서 출력되는 13번째 프레임의 영상데이타가 될 수 있다. 또한 상기 제어부10은 사용자의 선택에 따라 상기 영상코덱80의 부호화율을 가변시키는 방법을 사용할 수도 있다. 즉, 상기 영상코덱80의 최대 부호화율보다 낮은 부호화율을 설정하여 JPEG 영상데이타를 생성하도록 제어할 수도 있다. 예를들면, 상기 카메라부40에서 1초에 20프레임의 영상데이타를 촬영할 수 있으며, 상기 영상코덱80이 1초에 5프레임의 영상데이타를 코딩할 수 있다고 가정하면, 사용자는 1초에 1프레임, 2프레임,3프레임 및 4프레임들 중의 한 부호화율을 가지도록 상기 영상코덱80을 제어할 수도 있다.
상기와 같이 프레임 단위로 부호화된 합성 영상데이타를 생성하는 중에 사용자로부터 동영상모드의 종료 요구가 발생되면, 상기 제어부10은 427단계에서 이를 감지하고, 429단계에서 상기 영상코덱80 및 오디오코덱85를 오프시킨다. 이때 상기 카메라부40은 휴대전화기의 동작 상태에 따라 독립적으로 제어할 수 있다. 즉, 상기 휴대전화기는 카메라부40으로부터 촬영되는 영상신호를 표시부60에 표시하는 모드(preview mode)를 수행할 수 있다. 이런 경우, 상기 영상코덱80 및 오디오코덱85는 동작하지 않으며, 상기 카메라부40으로부터 촬영되는 영상신호는 영상처리부50의 화면표시생성부를 통해 표시부60에 표시된다. 따라서 상기 동영상모드가 상기 프리뷰 모드 상태에서 수행된 경우, 상기 동영상모드를 종료하면 상기 제어부10은 영상코덱80은 오프시키며, 상기 카메라부40에서 출력되는 영상화면은 카메라인터페이스부311, 색변환부315, 스케일러313 및 LCD인터페이스부317을 통해 표시부60에 인가되어 프리뷰 영상화면으로 표시된다. 그러나 상기 프리뷰 모드를 수행하지 않는 상태에서 상기 동영상모드를 수행한 경우, 상기 제어부10은 상기 429단계에서 카메라부40도 오프시킨다.
상기 429단계 수행 후, 상기 제어부10은 431단계에서 상기 메모리30에 저장 된 동영상의 이름을 등록하기 위한 정보를 표시한다. 이때 상기 휴대전화기가 GPS 수신기를 구비하지 않는 경우, 동영상을 촬영한 장소 및 시간, 그리고 메모리30에 저장된 합성 동영상신호의 이름을 입력하도록 안내하는 메뉴를 표시할 수 있다. 그리고 상기 휴대전화기가 GPS 수신기를 구비하는 경우 상기 메모리30에 저장된 합성 동영상신호의 이름을 입력하도록 안내하는 메뉴를 표시할 수 있다. 상기 메뉴정보는 상기 제어부10에서 생성하며, 상기 생성된 정보는 사용자 데이터(user data)로써, 상기 표시부60 상에 표시된다.
상기와 같이 메뉴를 표시하는 상태에서 키입력부27을 통해 상기 합성 동영상의 이름이 입력되면, 상기 제어부10은 433단계에서 이를 감지하고, 435단계에서 상기 메모리30에 저장된 합성 동영상에 대응되는 이름, 촬영장소 및 시간 정보를 입력한다. 이때 사용자는 촬영장소 및 시간 정보를 입력하지 않고 이름만 입력할 수도 있다. 이런 경우, 사용자는 이름을 입력한 후 종료키를 누르면, 상기 제어부10은 상기 종료키에 의해 이름 메뉴에 입력된 정보를 통해 이름만 등록한다.
상술한 종래 기술에 따른 영상표시 장치 및 방법은 단지 동영상의 용량을 감소시키기 위하여 영상 정보에서 일정한 간격으로 프레임을 추출하여 오디오 신호와 결합하는 것에 불과하여 사용자가 원하는 방식, 순서 등에 따라 영상을 편집할 수 없다는 문제점이 있다.
따라서, 다양한 사용자의 요구를 충족시켜야 하는 UCC에 종래 기술에 따른 방법 및 장치를 적용하는 것은 부적절하다.
본 발명은 사진, 동영상, 음악 및 텍스트를 포함하는 슬라이드 쇼를 사용자가 원하는 방식에 따라 편집하고 편집된 슬라이드 쇼에 시각 효과를 부가하여 UCC(User Created Contents)를 생성할 수 있는 모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성 방법을 제공하는 것을 그 목적으로 한다.
본 발명에 따른 슬라이드쇼 생성 방법은 모바일 장치에서 재생되는 슬라이드쇼를 생성하는 방법에 있어서, (a) 동영상 데이터에 포함된 하나 이상의 프레임 데이터 및 하나 이상의 연속된 프레임으로 구성되는 구간 영상 데이터 중 적어도 하나를 추출하는 단계; (b) 상기 추출된 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 사용자에게 제공하는 단계; (c) 상기 사용자가 선택한 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 배열하는 단계; (d) 상기 배열된 하나 이상의 프레임 데이터 또는 구간 영상 데이터에 시각 효과를 삽입하는 단계; 및 (e) 상기 시각 효과가 삽입된 상기 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 통합 슬라이드 쇼 데이터로 인코딩하는 단계를 포함하는 것을 특징으로 한다.
상기 (d) 단계는 상기 통합 슬라이드 쇼 데이터에 포함된 오디오 스트림의 음파 변화량에 따라 상기 시각 효과를 삽입하는 단계를 포함하는 것이 바람직하다.
상기 (d) 단계는 상기 오디오 스트림의 진폭의 평균값이 소정 값 이상인 경우 상기 시각 효과를 삽입하는 단계를 포함할 수 있다.
또한, 상기 (d) 단계는 상기 음파의 변화량에 따라 화면 전환 속도를 조절하는 단계를 포함하는 것이 바람직하다.
상기 (d) 단계는 상기 통합 슬라이드 쇼 데이터에 포함된 오디오 스트림을 악기별 사운드로 분리하는 단계; 및 상기 분리된 악기별 사운드에 따라 상기 시각 효과를 삽입하는 단계를 포함할 수 있다.
상기 (d) 단계는 상기 시각 효과를 정의한 템플릿을 이용하여 상기 시각 효과를 삽입하는 단계를 포함할 수 있다.
상기 템플릿에 의해 정의된 상기 시각 효과는 상기 선택된 하나 이상의 프레임 데이터 또는 구간 영상 데이터의 배열 순서, 상기 구간 영상 데이터의 처리 방식, 화면 전환 방법 및 삽입된 오디오 스트림에 따른 화면 처리 중 적어도 하나를 포함하는 것이 바람직하다.
상기 배열 순서는 순차 배열 및 임의 배열 중 어느 하나인 것이 바람직하다.
상기 구간 영상 데이터의 처리 방법은 상기 구간 영상 데이터로부터 스틸 이미지를 추출 처리를 포함하는 것이 바람직하다.
본 발명에 따른 슬라이드쇼 생성 방법은 상기 템플릿을 템플릿 저장 서버로부터 다운로드하는 단계를 더 포함할 수 있다.
본 발명에 따른 슬라이드쇼 생성 방법은 상기 (e) 단계를 수행하기 전에 상기 사용자가 상기 (e) 단계에 의해 생성되는 통합 슬라이드 쇼 데이터를 프리뷰하는 단계를 더 포함할 수 있다.
상기 (a) 단계는 (a-1) 상기 모바일 장치에 저장된 동영상 데이터의 목록을 제공하는 단계; (a-2) 상기 동영상 데이터 목록으로부터 상기 동영상 데이터를 선택하는 단계; 및 (a-3) 상기 모바일 장치의 디스플레이에 표시되는 상기 선택된 동 영상 데이터에서 선택 수단에 의해 지속적으로 선택된 구간을 상기 구간 영상 데이터로 추출하는 단계를 포함하는 것이 바람직하다.
상기 (a) 단계는 (a-1) 상기 모바일 장치에 저장된 동영상 데이터의 목록을 제공하는 단계; (a-2) 상기 동영상 데이터 목록으로부터 상기 동영상 데이터를 선택하는 단계; 및 (a-3) 상기 모바일 장치의 디스플레이에 표시되는 상기 선택된 동영상 데이터에서 선택수단에 의해 불연속적으로 선택된 프레임 데이터를 상기 하나 이상의 프레임 데이터로 추출하는 단계를 포함하는 것이 바람직하다.
본 발명은 (a) 동영상 데이터에 포함된 하나 이상의 프레임 데이터 및 하나 이상의 연속된 프레임으로 구성되는 구간 영상 데이터 중 적어도 하나를 추출하는 단계; (b) 상기 추출된 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 사용자에게 제공하는 단계; (c) 상기 사용자가 선택한 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 배열하는 단계; (d) 상기 배열된 하나 이상의 프레임 데이터 또는 구간 영상 데이터에 시각 효과를 삽입하는 단계; 및 (e) 상기 시각 효과가 삽입된 상기 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 통합 슬라이드 쇼 데이터로 인코딩하는 단계를 수행하는 슬라이드 쇼 생성 프로그램이 저장된 컴퓨터로 판독가능한 기록 매체를 포함한다.
이하에서는, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세히 설명한다.
도 3은 본 발명에 따른 슬라이드쇼 생성 방법을 도시한 흐름도이다.
도 3을 참조하면, 사용자가 슬라이드 쇼 생성을 선택하면, 모바일 장치는 사 용자에게 모바일 장치의 저장부, 예를 들면 모바일 장치의 플래쉬 메모리 등에 저장된 동영상 데이터의 목록을 제공한다(S100).
다음에는, 저장부에 저장된 동영상 데이터 중 사용자가 선택한 동영상 데이터를 판독하여 로딩한다(S110).
로딩된 동영상 데이터는 사용자에게 LCD 등의 디스플레이 장치를 통하여 제공되며(S120), 사용자는 상기 동영상 데이터로부터 하나 이상의 프레임 데이터 및 하나 이상의 연속된 프레임으로 구성되는 구간 영상 데이터 중 적어도 하나를 추출한다(S130).
여기서, 상기 동영상 데이터는 복수개의 프레임으로 구성되는데, 상기 복수개의 프레임 중 사용자가 지정한 불연속적인 프레임을 하나 이상 추출하거나 사용자가 지정한 구간의 연속된 프레임을 추출한다. 불연속 적인 프레임은 그 각각이 하나의 정지 화상을 구성하고, 지정한 구간의 연속된 프레임은 그 구간에 한하여 연속된 동영상을 구성한다.
상기 과정을 더욱 구체적으로 살펴보면 다음과 같다.
모바일 장치는 사용자가 상기 동영상 데이터 목록으로부터 선택한 동영상 데이터를 로딩하여 디스플레이 장치를 통하여 표시한다.
사용자는 선택 수단(예를 들면 마우스, 터치펜)을 이용하여 상기 로딩된 동영상 데이터로부터 원하는 부분을 추출한다.
예를 들어, 구간 영상 데이터를 추출하고자 하는 경우, 선택된 동영상 데이터를 재생하면서 원하는 부분이 시작되는 프레임이 표시되면, 선택 수단을 이용하 여 시작 프레임을 클릭하고 클릭한 상태를 유지한다. 클릭한 상태는 원하는 부분이 끝날 때까지 유지하고 원하는 구간이 끝나면 클릭을 해제한다. 즉, 모바일 장치의 디스플레이 장치에 표시되는 상기 선택된 동영상 데이터에서 선택 수단에 의해 지속적으로 선택된 구간을 상기 구간 영상 데이터로 추출한다.
또한, 예를 들어 하나 이상의 프레임 데이터를 추출하고자 하는 경우에는 선택된 동영상 데이터를 재생하면서 원하는 프레임이 표시되면, 선택 수단을 이용하여 상기 원하는 프레임을 한번 클릭한다. 상기 클릭시에 디스플레이 장치에 표시되는 프레임은 프레임 데이터로 추출된다. 클릭을 불연속적으로 여러번 수행하면 각 클릭시에 디스플레이 장치에 표시되는 프레임은 하나 이상의 프레임 데이터로 추출된다. 즉, 디스플레이 장치에 표시되는 상기 선택된 동영상 데이터에서 선택수단에 의해 불연속적으로 선택된 프레임 데이터는 상기 하나 이상의 프레임 데이터로 추출된다.
상기 추출된 하나 이상의 프레임 데이터 또는 구간 영상 데이터는 추출한 순서에 따라 배열되어 디스플레이 장치를 통하여 사용자에게 제공한다(S140).
사용자는 추출된 데이터를 검토한 후 동일한 또는 다른 동영상 데이터로부터 추가적으로 프레임 데이터를 추출할 수 있다.
사용자는 제공된 추출된 연속 또는 불연속의 프레임 데이터의 배열을 변경하여 원하는 순서로 배열하거나 프레임 데이터의 일부 또는 전부를 삭제 또는 편집할 수 있다.
예를 들여, 10개의 불연속 프레임 데이터과 2개의 연속된 프레임 데이터를 추출한 경우 사용자는 키패드 등을 조작하여 10개의 불연속 프레임 데이터 중 3개를 삭제하고, 2개의 연속된 프레임 데이터 중 하나를 삭제할 수 있다. 또한, 연속된 프레임 데이터에 포함된 프레임 데이터의 일부를 편집하는 것도 가능하다.
사용자는 편집시 이미지, 오디오 데이터 및 텍스트를 추가로 삽입할 수 있다. 예를 들어, 사용자는 저장 모듈에 포함된 이미지, 오디오 데이터 및 텍스트 데이터를 선택하고 이미지를 슬라이드 쇼에서 사용자가 원하는 위치에 삽입하거나 오디오 데이터를 배경음으로 사용하도록 선택할 수 있다. 텍스트 데이터는 사용자가 원하는 텍스트를 슬라이드 쇼의 각 프레임에 오버레이하거나 텍스트를 그래픽으로 변경하여 독립적인 프레임으로 구성할 수도 있다.
사용자의 편집 및 배열이 완료되면, 상기 추출된 하나 이상의 프레임 데이터 또는 구간 영상 데이터에 시각 효과를 삽입한다(S150).
상기 시각 효과는 다양한 형태가 가능하다. 상기 시각 효과는 상기 선택된 하나 이상의 프레임 데이터 또는 구간 영상 데이터의 배열 순서, 상기 구간 영상 데이터의 처리 방식, 화면 전환 방법 및 삽입된 오디오 스트림에 따른 화면 처리 중 적어도 하나를 포함할 수 있다.
여기서, 상기 선택된 하나 이상의 프레임 데이터 또는 구간 영상 데이터의 배열 순서는 순차 배열 또는 임의 배열일 수 있다. 즉, 사용자가 선택한 순서를 그대로 적용하거나, 사용자가 선택한 순서와 관계없이 임의(random)로 배열할 수도 있다.
또한, 상기 구간 영상 데이터의 처리 방법은 상기 구간 영상 데이터로부터 스틸 이미지를 추출하여 사용하거나 상기 구간 영상 데이터를 그대로 사용하는 것을 의미한다. 구체적으로는, 상기 구간 영상 데이터로부터 일정한 간격 또는 임의의 간격으로 스틸 이미지를 추출한 후 상기 추출된 스틸 이미지에 일정 또는 임의의 지속 시간(duration)을 지정하여 배열할 수 있다.
화면 전환 방법은 화면을 페이드-아웃(fade-out), 페이드-인(fade-in) 또는 오버랩(overlap)하는 것을 의미한다.
삽입된 오디오 스트림에 따른 화면 처리는 오디오 스트림의 음파 변화량에 따라 상기 시각 효과를 삽입하는 것을 의미한다. 오디오 스트림은 선택된 동영상 데이터에 포함되어 있는 오디오 스트림 또는 사용자가 선택한 오디오 스트림일 수 있다.
삽입된 오디오 스트림에 따른 화면 처리의 일례로써 상기 오디오 스트림의 진폭의 평균값을 측정하고, 상기 평균값이 임계치 이상인 순간에 사용자가 선택한 시각 효과를 삽입하는 방법이 있다. 예를 들어, 상기 평균값이 임계치 이상인 순간에 화면으로 윈도우 형태의 사각형을 출력하여 시각 적인 효과를 삽입할 수 있다.
또한, 상기 음파의 변화량에 따라 화면 전환 속도를 조절하는 시각 효과를 삽입할 수도 있다. 예를 들어, 음파의 변화량이 큰 경우에는 불연속의 프레임 데이터가 표시되는 시간을 짧게 하여 화면이 빠른 속도로 변하는 시각 효과를 삽입할 수 있다.
음파 변화량의 변화에 따른 다른 시각 효과로서, 상기 오디오 스트림을 악기별 사운드로 분리한 후 상기 분리된 악기별 사운드에 따라 상기 시각 효과를 삽입 할 수 있다.
예를 들어, 타악기의 경우 음파의 진폭 변화량이 크므로 타악기에 따라 반응하는 시각 효과를 삽입할 수 있다.
상기 시각 효과는 사용자가 각 시각 효과를 선택할 수 있을 뿐만 아니라 템플릿을 이용하여 삽입할 수도 있다.
템플릿은 하나 이상의 시각 효과를 정의하고 있는 시각 효과의 집합으로서, 사용자가 템플릿을 선택하면 미리 정해진(pre-defined) 시각 효과를 슬라이드 쇼에 삽입한다.
상기 템플릿에 의해 정의된 상기 시각 효과는 상기 선택된 하나 이상의 프레임 데이터 또는 구간 영상 데이터의 배열 순서, 상기 구간 영상 데이터의 처리 방식, 상기 화면 전환 방법 및 상기 삽입된 오디오 스트림에 따른 화면 처리 등 상술한 시각 효과 중 적어도 하나를 포함한다.
또한, 상기 시각 효과는 인코딩시 슬라이드 쇼 데이터 자체에 삽입하여 인코딩할 수 있으며, 시각 효과를 정의한 데이터와 인코딩된 동영상 데이터를 하나의 컨테이너에 저장하여 재생시에 시각 효과를 실시간으로 삽입할 수도 있다.
사용자는 모바일 장치에 저장된 템플릿을 선택하여 적용하거나 유/무선 네트워크를 통해 연결된 외부의 템플릿 저장 서버로부터 다양한 템플릿을 다운로드하여 적용할 수 있다.
다음에는, 시각 효과가 적용된 상기 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 배열된 순서에 따라 통합 슬라이드 쇼 데이터로 인코딩한다(S170).
인코딩 과정을 수행하기 전에, 사용자에게 프리뷰(preview)를 제공하여 인코딩을 진행할 것인지 확인하는 단계를 더 포함할 수도 있다(S160).
상기 인코딩은 H.264 코덱을 이용하여 수행되는 것이 바람직하고, MP4 포맷으로 저장되는 것이 바람직하다.
H.264 코덱은 국제 표준 코덱으로서 저용량 고화질의 영상 파일을 생성하는 것을 가능하게 하고, MP4 포맷은 이미지, 오디오, 동영상, 텍스트 등의 다양한 컨테츠를 통합 저장할 수 있는 국제 표준 포맷이다.
예를 들어, H.264 코덱을 이용하여 인코딩하는 경우 본 출원인에 의해 2006년 9월 6일자로 출원된 특허 출원 제2006-23940호에 개시된 H.264/AVC 인코더의 인트라 매크로블록 모드 검사 스킵 방법을 이용할 수 있다.
또한, MP4 포맷은 ISO/IEC 14496-12에 의해 정의된 표준 포맷일 수도 있으며, 상기 표준 포맷에 추가 정보가 추가된 확장 포맷(Enhanced MP4)일 수도 있다.
ISO/IEC 14496-12(ISO base media file format, ISO/IEC 15444-12와 동일)이 가장 일반적인 저장 포맷이며, 이것에 맞춰 MPEG-4 저장 포맷을 정의한 것이, ISO/IEC 14496-14 (MP4 file format)이다. 또한 ISO/IEC 14496-12에 맞춰 MPEG-4/AVC저장 포맷을 정의한 것이 ISO/IEC 14496-15이다.
본 발명은 14496-12, 14496-14, 14496-15 등에 따른 MP4 파일에 모두 적용될 수 있다.
예를 들어, 확장 포맷은 ISO/IEC 14496-12에 의해 정의된 표준 데이터 구간과 사용자가 임의로 정보를 저장할 수 있는 사용자 데이터 구간을 포함할 수 있다. 상기 사용자 데이터 구간은 텍스트 데이터, 상기 텍스트 데이터의 갱신 시간 및 상기 슬라이드 쇼 데이터의 효과 정의 데이터 등을 포함할 수 있다. 텍스트 데이터는 슬라이드 쇼 재생시에 디스플레이 장치에 오버레이되는 텍스트이며, 텍스트 데이터의 갱신 시간 데이터는 텍스트를 화면에 표시하는 속도, 시간 등을 정의하는 데이터이며, 슬라이드 쇼 데이터의 효과 정의 데이터는 각 슬라이드 쇼의 지속 시간(duration), 페이드-인 또는 페이드-아웃 등의 효과(effect)를 정의하는 데이터를 포함할 수 있다.
사용자 데이터 구간에는 다음과 같은 데이터가 삽입될 수 있다.
MMB Box
Box type : '_mmb'
Container : User data box 'udta'
Mandatory : No
Quantity : Zero or one
syntax :
aligned(8) class MMBBox extends Box('_mmb') {
string cmmt;
int rfts;
string efft;
}
('cmmt') : String
Refresh time ('rfts') : Integer
Effect ('efft') : String
여기서, Text 항목에는 MP4 파일 작성시 입력되는 사용자 텍스트가 저장되며, Refresh time 항목에는 사용자가 지정한 텍스트 출력시 갱신되는 시간이 저장된다. 또한, Effect 항목에는 효과에 관한 데이터가 저장되는데, 바이너리 데이터를 Base64로 인코딩해서 문자열로 저장하는 것이 바람직하다.
상기 각 단계를 수행하는 슬라이드쇼 생성 프로그램이 저장된 컴퓨터로 판독가능한 기록 매체까지 본 발명의 범위가 미치는 것은 당업자에게 자명하다고 할 것이다.
본 발명에 따른 슬라이드쇼 생성 방법 및 장치와 이를 이용한 모바일 장치는 시각 효과가 적용된 사진, 동영상, 음악 및 텍스트를 포함하는 슬라이드 쇼를 사용자가 원하는 방식에 따라 편집하고 표준화된 포맷을 따르는 UCC(User Created Contents)를 생성할 수 있다.
특히, 시각 효과가 적용된 이미지, 오디오 및 텍스트를 포함하는 슬라이드 쇼를 사용자가 원하는 대로 생성할 수 있으며, 모바일 장치는 물론이고 개인용 컴퓨터 상에서도 자유롭게 생성할 수 있다는 장점이 있다.
또한, H.264 코덱을 이용하므로 용량 대비 화질이 매우 우수하고, MP4 파일 포맷을 이용하므로 컨텐츠들의 효율적인 통합 저장 및 재생에 유리하며, H.264 코덱이 설치된 모바일 기기에서는 어디서나 재생이 가능하다는 장점이 있다.

Claims (14)

  1. 모바일 장치에서 재생되는 슬라이드쇼를 생성하는 방법에 있어서,
    (a) 동영상 데이터에 포함된 하나 이상의 프레임 데이터 및 하나 이상의 연속된 프레임으로 구성되는 구간 영상 데이터 중 적어도 하나를 추출하는 단계;
    (b) 상기 추출된 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 사용자에게 제공하는 단계;
    (c) 상기 사용자가 선택한 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 배열하는 단계;
    (d) 상기 배열된 하나 이상의 프레임 데이터 또는 구간 영상 데이터에 시각 효과를 삽입하는 단계; 및
    (e) 상기 시각 효과가 삽입된 상기 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 통합 슬라이드 쇼 데이터로 인코딩하는 단계
    를 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  2. 제1항에 있어서,
    상기 (d) 단계는 상기 통합 슬라이드 쇼 데이터에 포함된 오디오 스트림의 음파 변화량에 따라 상기 시각 효과를 삽입하는 단계를 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  3. 제2항에 있어서,
    상기 (d) 단계는 상기 오디오 스트림의 진폭의 평균값이 소정 값 이상인 경우 상기 시각 효과를 삽입하는 단계를 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  4. 제2항에 있어서,
    상기 (d) 단계는 상기 음파의 변화량에 따라 화면 전환 속도를 조절하는 단계를 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  5. 제2항에 있어서,
    상기 (d) 단계는 상기 통합 슬라이드 쇼 데이터에 포함된 오디오 스트림을 악기별 사운드로 분리하는 단계; 및
    상기 분리된 악기별 사운드에 따라 상기 시각 효과를 삽입하는 단계
    를 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  6. 제1항에 있어서,
    상기 (d) 단계는 상기 시각 효과를 정의한 템플릿을 이용하여 상기 시각 효과를 삽입하는 단계를 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  7. 제6항에 있어서,
    상기 템플릿에 의해 정의된 상기 시각 효과는 상기 선택된 하나 이상의 프레임 데이터 또는 구간 영상 데이터의 배열 순서, 상기 구간 영상 데이터의 처리 방식, 화면 전환 방법 및 삽입된 오디오 스트림에 따른 화면 처리 중 적어도 하나를 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  8. 제7항에 있어서,
    상기 배열 순서는 순차 배열 및 임의 배열 중 어느 하나인 것을 특징으로 하는 슬라이드쇼 생성 방법.
  9. 제7항에 있어서,
    상기 구간 영상 데이터의 처리 방법은 상기 구간 영상 데이터로부터 스틸 이미지를 추출 처리를 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  10. 제6항에 있어서,
    상기 템플릿을 템플릿 저장 서버로부터 다운로드하는 단계를 더 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  11. 제1항에 있어서,
    상기 (e) 단계를 수행하기 전에 상기 사용자가 상기 (e) 단계에 의해 생성되는 통합 슬라이드 쇼 데이터를 프리뷰하는 단계를 더 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  12. 제1항에 있어서,
    상기 (a) 단계는
    (a-1) 상기 모바일 장치에 저장된 동영상 데이터의 목록을 제공하는 단계;
    (a-2) 상기 동영상 데이터 목록으로부터 상기 동영상 데이터를 선택하는 단계; 및
    (a-3) 상기 모바일 장치의 디스플레이에 표시되는 상기 선택된 동영상 데이터에서 선택 수단에 의해 지속적으로 선택된 구간을 상기 구간 영상 데이터로 추출하는 단계
    를 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  13. 제1항에 있어서,
    상기 (a) 단계는
    (a-1) 상기 모바일 장치에 저장된 동영상 데이터의 목록을 제공하는 단계;
    (a-2) 상기 동영상 데이터 목록으로부터 상기 동영상 데이터를 선택하는 단계; 및
    (a-3) 상기 모바일 장치의 디스플레이에 표시되는 상기 선택된 동영상 데이터에서 선택수단에 의해 불연속적으로 선택된 프레임 데이터를 상기 하나 이상의 프레임 데이터로 추출하는 단계
    를 포함하는 것을 특징으로 하는 슬라이드쇼 생성 방법.
  14. (a) 동영상 데이터에 포함된 하나 이상의 프레임 데이터 및 하나 이상의 연속된 프레임으로 구성되는 구간 영상 데이터 중 적어도 하나를 추출하는 단계;
    (b) 상기 추출된 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 사용자에게 제공하는 단계;
    (c) 상기 사용자가 선택한 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 배열하는 단계;
    (d) 상기 배열된 하나 이상의 프레임 데이터 또는 구간 영상 데이터에 시각 효과를 삽입하는 단계; 및
    (e) 상기 시각 효과가 삽입된 상기 하나 이상의 프레임 데이터 또는 구간 영상 데이터를 통합 슬라이드 쇼 데이터로 인코딩하는 단계
    를 수행하는 슬라이드 쇼 생성 프로그램이 저장된 컴퓨터로 판독가능한 기록 매체.
KR1020070039408A 2007-04-23 2007-04-23 모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성방법 KR100860510B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070039408A KR100860510B1 (ko) 2007-04-23 2007-04-23 모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070039408A KR100860510B1 (ko) 2007-04-23 2007-04-23 모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성방법

Publications (1)

Publication Number Publication Date
KR100860510B1 true KR100860510B1 (ko) 2008-09-26

Family

ID=40023752

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070039408A KR100860510B1 (ko) 2007-04-23 2007-04-23 모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성방법

Country Status (1)

Country Link
KR (1) KR100860510B1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017051955A1 (ko) * 2015-09-25 2017-03-30 이정빈 동영상 이펙트 적용 장치 및 방법
KR20170057473A (ko) * 2015-10-30 2017-05-25 주식회사 엘지유플러스 단말 및 단말의 컨텐츠 제작 방법
KR20210062239A (ko) * 2019-11-21 2021-05-31 이화여자대학교 산학협력단 슬라이드 쇼 생성 방법 및 슬라이드 쇼 생성 방법을 수행하는 시스템
KR102308372B1 (ko) * 2020-12-18 2021-10-06 주식회사 스파크엑스 (SPARKX Co.,Ltd.) Vfx 서비스 제공 및 협업 기능을 갖는 하이브리드 클라우드 시스템
US20220121704A1 (en) * 2019-07-01 2022-04-21 Canon Kabushiki Kaisha Image file creation apparatus, image file creation method, and storage medium

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030017522A (ko) 2001-03-23 2003-03-03 코닌클리케 필립스 일렉트로닉스 엔.브이. 가사/시각정보와 오디오 재생의 동기화
KR20050018084A (ko) 2003-08-13 2005-02-23 (주)에이치인포메이션 멀티미디어 메시지 컨텐츠 작성/전송 기능을 갖는 휴대용단말기

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030017522A (ko) 2001-03-23 2003-03-03 코닌클리케 필립스 일렉트로닉스 엔.브이. 가사/시각정보와 오디오 재생의 동기화
KR20050018084A (ko) 2003-08-13 2005-02-23 (주)에이치인포메이션 멀티미디어 메시지 컨텐츠 작성/전송 기능을 갖는 휴대용단말기

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017051955A1 (ko) * 2015-09-25 2017-03-30 이정빈 동영상 이펙트 적용 장치 및 방법
KR20170057473A (ko) * 2015-10-30 2017-05-25 주식회사 엘지유플러스 단말 및 단말의 컨텐츠 제작 방법
KR101970383B1 (ko) * 2015-10-30 2019-04-18 주식회사 엘지유플러스 단말 및 단말의 컨텐츠 제작 방법
US20220121704A1 (en) * 2019-07-01 2022-04-21 Canon Kabushiki Kaisha Image file creation apparatus, image file creation method, and storage medium
KR20210062239A (ko) * 2019-11-21 2021-05-31 이화여자대학교 산학협력단 슬라이드 쇼 생성 방법 및 슬라이드 쇼 생성 방법을 수행하는 시스템
KR102430556B1 (ko) * 2019-11-21 2022-08-08 이화여자대학교 산학협력단 슬라이드 쇼 생성 방법 및 슬라이드 쇼 생성 방법을 수행하는 시스템
KR102308372B1 (ko) * 2020-12-18 2021-10-06 주식회사 스파크엑스 (SPARKX Co.,Ltd.) Vfx 서비스 제공 및 협업 기능을 갖는 하이브리드 클라우드 시스템

Similar Documents

Publication Publication Date Title
EP3047644B1 (en) Method and apparatus for generating a text color for a group of images
US9798442B2 (en) Information processing apparatus display control method and program
US11580155B2 (en) Display device for displaying related digital images
KR100884144B1 (ko) 멀티미디어 재생장치 및 메뉴 화면 표시방법
US20060056796A1 (en) Information processing apparatus and method and program therefor
KR101054135B1 (ko) 복합 미디어 콘텐츠의 변환 장치 및 변환 방법과 기록 매체
US7606469B2 (en) Information processing apparatus and method, and program
JP5903187B1 (ja) 映像コンテンツ自動生成システム
US20090100462A1 (en) Video browsing based on thumbnail image
KR100726258B1 (ko) 휴대단말의 사진파일 및 음성파일을 이용한 영상물 제작방법
EP1926103A2 (en) System, method and medium playing moving images
KR20100113266A (ko) 휴대용 단말기에서 3차원 영상 메시지 제작 방법 및 장치
KR100860510B1 (ko) 모바일 장치에서 시각 효과가 삽입된 슬라이드 쇼의 생성방법
US20060126088A1 (en) Information processing apparatus and method, and program
KR101905638B1 (ko) 동영상 재생 장치 및 방법
US8094990B2 (en) Information processing apparatus
JP6765558B1 (ja) コンテンツ配信装置、コンテンツ配信方法、コンテンツ配信システム、および、コンテンツ配信プログラム
US20120251081A1 (en) Image editing device, image editing method, and program
KR100606080B1 (ko) 휴대용단말을 이용한 애니메이션 생성 장치 및 방법
JP2007096574A (ja) 画像表示装置及びプログラム
KR20090124240A (ko) 자막 편집 장치 및 그 방법
WO2022227329A1 (zh) 媒体文件生成、播放方法及设备
KR100750667B1 (ko) 모바일 장치에서 슬라이드 쇼를 생성하는 방법 및 장치와이를 이용한 모바일 장치
KR101245149B1 (ko) 실시간 맞춤형 동영상 제공방법 및 그 방법을 이용한 동영상 제공 장치
KR100782803B1 (ko) 전자 앨범을 위한 디스플레이 단말기 및 그 디스플레이 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee