KR100963005B1 - 자유시점 ａｖ 서비스에 따른 파일 생성 방법 - Google Patents

자유시점 ａｖ 서비스에 따른 파일 생성 방법 Download PDF

Info

Publication number
KR100963005B1
KR100963005B1 KR1020080066484A KR20080066484A KR100963005B1 KR 100963005 B1 KR100963005 B1 KR 100963005B1 KR 1020080066484 A KR1020080066484 A KR 1020080066484A KR 20080066484 A KR20080066484 A KR 20080066484A KR 100963005 B1 KR100963005 B1 KR 100963005B1
Authority
KR
South Korea
Prior art keywords
information
file
preset
video object
audio object
Prior art date
Application number
KR1020080066484A
Other languages
English (en)
Other versions
KR20100006300A (ko
Inventor
이태진
유재현
강경옥
홍진우
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020080066484A priority Critical patent/KR100963005B1/ko
Priority to CN2008801310135A priority patent/CN102150424B/zh
Priority to PCT/KR2008/005881 priority patent/WO2010005149A1/en
Priority to US13/003,188 priority patent/US9197908B2/en
Publication of KR20100006300A publication Critical patent/KR20100006300A/ko
Application granted granted Critical
Publication of KR100963005B1 publication Critical patent/KR100963005B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4755—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for defining user preferences, e.g. favourite actors or genre
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals

Abstract

본 발명의 자유시점 AV 서비스에 따른 파일 생성 방법은, 콘텐츠 관련 정보, AV 객체 관련 정보, 프리셋 관련 정보 또는 하나 이상의 프리셋 정보를 포함하는 파일 헤더를 생성하는 단계, 하나 이상의 오디오 객체 정보를 생성하는 단계, 하나 이상의 비디오 객체 정보를 생성하는 단계 및 상기 파일 헤더, 오디오 객체 정보 및 비디오 객체 정보를 하나의 자유시점 AV 파일의 프리셋 형식으로 가공하여 저장하는 단계를 포함한다.
Figure R1020080066484
자유시점, AV, 프리셋, 인코딩, 디코딩

Description

자유시점 ＡＶ 서비스에 따른 파일 생성 방법{METHOD FOR FILE FORMATION ACCORDING TO FREEVIEW AV SERVICE}
본 발명은 자유시점 AV 서비스에 따른 파일 생성 방법에 관한 것으로서, 보다 상세하게는 자유시점 AV 서비스를 제공하기 위한 파일 구조를 제안하고, 상기 파일 구조를 생성하는 방법 및 상기 파일 구조를 재생하는 방법에 관한 것이다.
디지털 관련 기술의 발전에 따라, 수동적/일방적 AV 서비스에서 능동적이고 사용자 참여가 가능한 AV 서비스로 변화하고 있다. 자유시점 AV 서비스는 오디오 및 비디오 공간상에서 사용자가 장면(Scene)을 네비게이션 하듯이 자신이 원하는 시청점(Viewpoint & Listening point)을 자유로이 선택하여 시청할 수 있도록 하는 사용자 중심의 실감형 오디오 및 비디오를 의미한다.
일반적인 멀티 미디어 서비스의 경우 하나의 오디오 객체와 하나의 비디오 객체로 서비스가 이루어지는 경우가 대부분이나. MPEG-4 시스템 규격에서는 여러 개의 객체들을 포함하는 멀티미디어 서비스에 대해 정의하고 있다. 자유시점 AV 서비스의 경우에도 MPEG-4 시스템에서 정의하고 있는 것과 비슷하게 여러 개의 객체들을 포함하는 멀티미디어 콘텐츠라 할 수 있다.
한편, MPEG-4 시스템 규격(ISO/IEC 14496-1)에서는 이와 같은 여러 개의 객체를 포함하는 콘텐츠의 파일 구조에 대해 정의하고 있다. MPEG-4 시스템 규격에 따른 파일 포맷에는 객체들의 3차원 장면 정보인 BIFS와 객체에 대한 정보인 OD 및 각각의 객체들의 스트림에 접근할 수 있는 색인 정보가 포함되고, BIFS, OD 등과 각 객체 스트림 데이터가 포함된다(참고, 각 객체 데이터는 파일 내부에 존재할 수도 있고, 다른 파일로 존재할 수도 있다).
이때, 각각의 객체 스트림에 대한 색인정보는 각 객체별로 구분되어 만들어 져서 저장되며, 각각의 객체 스트림들도 스트림 별로 구분되어 저장된다. 이러한 방식은 오디오, 비디오, 정지 영상 등, 여러 가지 종류의 객체들을 모두 수용할 수 있도록 유연하게 정의되어 있다.
한편, MPEG-4 시스템에서는 BIFS 데이터 및 BIFS command를 이용하여 사용자 인터랙션을 통한 3차원 장면 정보를 변경할 수 있는데, 이는 저작단계에서 이를 고려하여 BIFS 데이터를 적절히 생성해 주어야 하며, 단말에서 BIFS command를 해석할 수 있어야 한다. 이와 같이 MPEG-4 시스템에서는 다양한 사용자 인터랙션을 위한 기능을 포함하고 있는데, 이는 저작 단계나 재생 단말에서 다소 복잡한 동작을 요구하는 특징이 있다.
하지만, MPEG-4 시스템 규격에서는 오디오, 비디오, 정지영상 등의 다양한 형태의 미디어를 모두 포함하는 형태의 파일 구조를 정의하고 있는데 반하여, 자유시점 AV 콘텐츠의 경우에는 동일한 종류의 다수 객체를 포함하는 특징이 있어 기존의 MPEG-4 시스템에서 정의하고 있는 파일구조보다 효율적으로 콘텐츠를 저장하고, 각 객체에 대한 접근의 용이성을 높일 수 있는 파일 구조를 필요로 한다.
본 발명은 상술한 종래기술의 문제점을 해결하기 위해 안출된 것으로서, 고정(Constant) 프리셋과 가변(Variable) 프리셋을 이용하여, 하나의 자유시점 AV 콘텐츠에 다양한 AV 장면을 구성할 수 있는 파일 구조를 제공하는데 그 목적이 있다.
또한, 본 발명은 하나의 편집자가 제작한 자유시점 AV 콘텐츠 중 사용자가 프리셋 중 하나를 선택하여 자유롭게 자유시점 AV 콘텐츠를 이용할 수 있는 방법을 제공하는데 그 목적이 있다.
상기의 목적을 달성하고, 상술한 종래기술의 문제점을 해결하기 위하여, 본 발명의 일실시예에 따른 자유시점 AV 서비스에 따른 파일 생성 방법은, 콘텐츠 관련 정보, AV 객체 관련 정보, 프리셋 관련 정보 또는 하나 이상의 프리셋 정보를 포함하는 파일 헤더를 생성하는 단계, 하나 이상의 오디오 객체 정보를 생성하는 단계, 하나 이상의 비디오 객체 정보를 생성하는 단계 및 상기 파일 헤더, 오디오 객체 정보 및 비디오 객체 정보를 하나의 자유시점 AV 파일의 프리셋 형식으로 가공하여 저장하는 단계를 포함한다.
또한, 본 발명의 상기 파일 헤더, 오디오 객체 정보 및 비디오 객체 정보를 하나의 자유시점 AV 파일의 프리셋 형식으로 가공하여 저장하는 단계는, 사용자의 설정 시간 정보에 따라 상기 파일 헤더, 오디오 객체 정보 및 비디오 객체 정보를 하나의 자유시점 AV 파일의 프리셋 형식으로 가공하여 저장한다.
또한, 상기의 목적을 달성하고, 상술한 종래기술의 문제점을 해결하기 위하여, 본 발명의 일실시예에 따른 자유시점 AV 서비스에 따른 파일 재생 방법은, 프리셋 형식으로 가공된 자유시점 AV 파일 정보를 수신하는 단계, 상기 자유시점 AV 파일 정보로부터 파일 헤더를 추출하는 단계, 상기 자유시점 AV 파일 정보로부터 하나 이상의 오디오 객체 정보를 추출하는 단계, 상기 자유시점 AV 파일 정보로부터 하나 이상의 비디오 객체 정보를 추출하는 단계 및 상기 추출된 파일 헤더, 오디오 객체 정보 또는 비디오 객체 정보 중 하나 이상을 분석하여 자유시점 AV 파일 정보를 재생하는 단계를 포함한다.
또한, 상기의 목적을 달성하고, 상술한 종래기술의 문제점을 해결하기 위하여, 본 발명의 일실시예에 따른 컴퓨터에서 판독 가능한 자유시점 AV 서비스에 따른 파일 구조는, 콘텐츠 관련 정보, AV 객체 관련 정보, 프리셋 관련 정보 또는 하나 이상의 프리셋 정보를 포함하는 파일 헤더부, 하나 이상의 오디오 객체 정보를 생성하여 저장하는 오디오 객체 정보 저장부 및 하나 이상의 비디오 객체 정보를 생성하여 저장하는 비디오 객체 정보 저장부를 포함한다.
또한, 상기의 목적을 달성하고, 상술한 종래기술의 문제점을 해결하기 위하여, 본 발명의 일실시예에 따른 자유시점 AV 서비스에 따른 파일 재생 장치는, 프리셋 형식으로 가공된 자유시점 AV 파일 정보를 수신하는 수신부, 상기 자유시점 AV 파일 정보로부터 파일 헤더를 추출하는 파일 헤더 추출부, 상기 자유시점 AV 파일 정보로부터 하나 이상의 오디오 객체 정보를 추출하는 오디오 추출부, 상기 자유시점 AV 파일 정보로부터 하나 이상의 비디오 객체 정보를 추출하는 비디오 추출 부 및 상기 추출된 파일 헤더, 오디오 객체 정보 또는 비디오 객체 정보 중 하나 이상을 분석하여 자유시점 AV 파일 정보를 재생하는 재생부를 포함한다.
본 발명에 따르면 고정(Constant) 프리셋과 가변(Variable) 프리셋을 이용하여, 하나의 자유시점 AV 콘텐츠에 다양한 AV 장면을 구성할 수 있는 파일 구조를 제공할 수 있다.
또한, 본 발명에 따르면 하나의 편집자가 제작한 자유시점 AV 콘텐츠 중 사용자가 프리셋 중 하나를 선택하여 자유롭게 자유시점 AV 콘텐츠를 이용할 수 있는 방법을 제공할 수 있다.
이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명하지만, 본 발명이 실시예에 의해 제한되거나 한정되는 것은 아니다.
한편, 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 상세한 설명을 생략할 것이다. 그리고, 본 명세서에서 사용되는 용어(terminology)들은 본 발명의 바람직한 실시예를 적절히 표현하기 위해 사용된 용어들로서, 이는 사용자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 일실시예에 따른 자유시점 AV 서비스에 따른 파일 구조의 구성을 도시한 블록도이다.
본 발명은 자유시점 AV 서비스를 이용하는데 있어, 편집자가 다양한 시점을 표현하기 위한 비디오 객체들의 시점과 오디오 객체들의 위치나 크기 등을 제어하여 다양한 AV 장면을 구성할 수 있는데, 상기와 같은 AV 장면을 구성할 수 있는 것을 프리셋이라 한다.
예를 들어, 자유시점 AV 콘텐츠는 가수의 뮤직비디오를 자유시점 AV 콘텐츠로 제작하는 경우, 전방, 측면, 후방 등 다양한 시점의 비디오 객체와 가수의 목소리, 주요 악기 등 다양한 오디오 객체가 하나의 콘텐츠에 존재하며, 편집자는 다양한 AV 객체를 이용하여 특정 시간에 특정 비디오 객체를 선택하고 이에 따라 오디오 객체의 위치나 음량을 선택하여 프리셋을 제작할 수 있다.
즉, 본 발명에 따른 자유시점 AV 콘텐츠는 가수가 여러 명이 있는 경우, 각각의 가수를 중점으로 하는 프리셋으로 제작되고, 사용자의 취향에 따라 원하는 가수를 중점적으로 설정한 프리셋을 선택하여 시청할 수 있다.
본 발명의 자유시점 AV 서비스에 따른 파일 구조는 편집자가 미리 설정한 프리셋과 사용자 제어로 특징될 수 있다.
즉, 편집자는 각각의 AV 객체를 조합하여 다양한 AV 장면을 구성하고, 이를 프리셋 형태로 사용자에게 제공하며, 사용자는 하나의 AV 콘텐츠에서 다양한 변형을 자신의 취향에 따라 선택할 수 있다. 또한, 사용자는 또한 자신이 직접 AV 객체를 제어하여 자신만의 새로운 AV 장면을 구성할 수도 있다.
따라서, 상기와 같은 본 발명의 자유시점 AV 서비스를 제공하기 위한 파일 구조를 다음과 같이 제안한다.
본 발명의 자유시점 AV 서비스에 따른 파일 구조는 도 1에 도시된 바와 같이, 크게 파일 헤더부, 오디오 객체 정보 저장부 및 비디오 객체 정보 저장부로 구성된다.
이때, 상기 파일 헤더부는 자유시점 AV 서비스에 따른 파일의 파일 헤더를 의미하며, 콘텐츠 관련 정보, AV 객체 관련 정보, 프리셋 관련 정보 또는 하나 이상의 프리셋 정보 등의 다양한 정보를 포함한다.
또한, 상기 오디오 객체 정보 저장부는 하나 이상의 오디오 객체 정보를 생성하여 저장한다. 즉, 상기 오디오 객체 정보 저장부는 자유시점 AV 서비스에 따른 파일에 포함된 다양한 오디오 객체 정보를 저장하고 있다.
또한, 상기 비디오 객체 정보 저장부는 하나 이상의 비디오 객체 정보를 생성하여 저장한다. 즉, 상기 비디오 객체 정보 저장부는 자유시점 AV 서비스에 따른 파일에 포함된 다양한 비디오 객체 정보를 저장하고 있다.
도 2는 본 발명의 일실시예에 따른 파일 헤더의 예를 도시한 도면이다.
본 발명의 파일 헤더부에 저장된 상기 파일 헤더는 도 2에 도시된 바와 같이, 콘텐츠 관련 정보, AV 객체 관련 정보, 프리셋 관련 정보 또는 하나 이상의 프리셋 정보 등의 다양한 정보를 포함한다.
이때, 상기 콘텐츠 관련 정보는 콘텐츠 명, 제작자 정보, 장르 정보, 제작일자 정보 또는 장르 정보 등의 다양한 정보를 포함하고 있다.
또한, 상기 AV 객체 관련 정보는 상기 비디오 객체 정보의 개수 정보, 상기 오디오 객체 정보의 개수 정보 또는 상기 오디오 객체 정보의 재생 시간 정보 등의 다양한 정보를 포함하고 있다.
또한, 상기 하나 이상의 프리셋 관련 정보는 고정(Constant) 프리셋의 개수 정보 또는 가변(Variable) 프리셋의 개수 정보 중 어느 하나 이상을 포함한다. 즉, 본 발명은 다수의 프리셋 정보를 포함하고 있기 때문에 편집자 도는 사용자가 상기 프리셋 정보를 편집 또는 선택 사용하는데 편리함을 제공하기 위하여 프리셋의 개수 정보를 프리셋 정보에 포함시켜 제공하고 있다.
도 3은 본 발명의 일실시예에 따른 고정 프리셋 관련 정보의 예를 도시한 도면이다.
또한, 상기 프리셋 정보는 하나 이상의 편집된 고정 프리셋 관련 정보를 포함하고, 상기 편집된 고정 프리셋 관련 정보는 도 3에 도시된 바와 같이, 고정 프리셋 명, 비디오 객체 정보, 비디오 객체 속성 정보, 하나 이상의 오디오 객체 정보 또는 오디오 객체 속성 정보 등의 다양한 정보를 포함한다.
이때, 상기 프리셋 정보의 상기 비디오 객체 정보는 자유시점 AV 콘텐츠에 포함된 하나 이상의 비디오 객체 정보 중 편집자 또는 사용자에 의해 선택된 정보를 포함하며, 상기 비디오 객체 속성 정보는 줌(Zoom In/Out) 정보를 포함하고, 상기 오디오 객체 속성 정보는 선택된 오디오 객체 정보에 대한 위치 정보 또는 크기 정보를 포함한다.
도 4는 본 발명의 일실시예에 따른 가변 프리셋 관련 정보의 예를 도시한 도 면이다.
또한, 상기 프리셋 정보는 하나 이상의 편집된 가변 프리셋 관련 정보를 포함하고, 상기 편집된 가변 프리셋 관련 정보는 도 4에 도시된 바와 같이, 가변 프리셋 명, 시간 목록(Time Index)의 개수 정보, 상기 시간 목록 별 비디오 객체 변환 속성 정보, 상기 시간 목록 별 비디오 객체 정보, 상기 시간 목록 별 비디오 객체 속성 정보, 상기 시간 목록 별 오디오 객체 정보 또는 상기 시간 목록 별 오디오 객체 속성 정보 등의 다양한 정보를 포함한다.
이때, 상기 시간 목록은 특정 시간에 특정 비디오 객체 정보와 특정 오디오 객체 정보를 설정하기 위한 시간 정보를 의미하는 것으로, 편집자가 다양한 비디오 객체정보를 시간에 따라 선택할 수 있도록 한다.
또한, 상기 시간 목록 별 비디오 객체 변환 속성 정보는, 둘 이상의 비디오 객체가 결합하여 발생하는 효과 정보를 부가하여, 시간 목록 별로 비디오 객체 정보를 변환할 때 이전 비디오 객체 정보와 변환하는 비디오 객체 정보 사이의 전환 방법을 정의할 수 있으며, 이전 비디오 객체 정보와 변환 비디오 객체 정보가 서로 겹치면서 보여주는 효과나 이전 비디오 객체 정보를 밀어 내면서 새로운 비디오 객체 정보가 나타나는 효과 등을 표현할 수 있다.
또한, 본 발명은 편집자 또는 사용자가 시간에 따라 파일 구조를 설정할 수도 있다.
즉, 본 발명은 상기 파일 헤더, 오디오 객체 정보 및 비디오 객체 정보를 하나의 자유시점 AV 파일의 프리셋 형식으로 가공하여 저장하는 단계에서, 편집자 또 는 사용자의 설정 시간 정보에 따라 상기 파일 헤더, 오디오 객체 정보 및 비디오 객체 정보를 하나의 자유시점 AV 파일의 프리셋 형식으로 가공하여 저장할 수 있다.
전술한 바와 같이, 본 발명은 편집자가 자유시점 AV 서비스에 따른 파일 구조를 이용하여 하나의 자유시점 AV 콘텐츠에 다양한 AV 장면을 구성할 수 있고, 사용자는 편집자의 프리셋 중 하나를 선택함으로써, 자유시점 AV 서비스를 효율적으로 제공받을 수 있다.
즉, 사용자는 본 발명의 자유시점 AV 서비스에 따른 파일 구조에 의해 제공되는 AV 콘텐츠를 디코딩 장치 등을 통하여 수신한 후, 자유시점 콘텐츠를 선택적으로 사용할 수 있다.
상기 디코딩 장치를 의미하는 본 발명의 자유시점 AV 서비스에 따른 파일 재생 장치를 도 5를 참조하여 다음과 같이 정보의 흐름에 따라 순차적으로 설명하고자 한다.
도 5는 본 발명의 일실시예에 따른 자유시점 AV 서비스에 따른 파일 재생 장치의 구성을 도시한 블록도이다.
먼저, 수신부(110)는 프리셋 형식으로 가공된 자유시점 AV 파일 정보를 수신한다.
다음으로, 파일 헤더 추출부(120)는 상기 자유시점 AV 파일 정보로부터 파일 헤더를 추출한다.
다음으로, 오디오 추출부(130)는 상기 자유시점 AV 파일 정보로부터 하나 이 상의 오디오 객체 정보를 추출한다.
다음으로, 비디오 추출부(140)는 상기 자유시점 AV 파일 정보로부터 하나 이상의 비디오 객체 정보를 추출한다.
최종적으로, 재생부(150)는 상기 추출된 파일 헤더, 오디오 객체 정보 또는 비디오 객체 정보 중 하나 이상을 분석하여 자유시점 AV 파일 정보를 재생한다.
상기 자유시점 AV 파일 정보는 전술한 바와 같이, 본 발명의 자유시점 AV 서비스에 따른 파일 구조 형식으로 편집자가 선택 편집한 정보로써, 편집자가 편집한 정보를 모두 포함하고 있으며, 이는 다시 사용자가 일부 정보만을 선택하여 이용할 수도 있다.
즉, 상기 파일 헤더는 본 발명의 자유시점 AV 서비스에 따른 파일 구조에 포함된 상기 콘텐츠 관련 정보, 상기 AV 객체 관련 정보, 상기 프리셋 관련 정보 또는 하나 이상의 상기 프리셋 정보 등의 다양한 정보를 포함하고 있다.
본 발명의 자유시점 AV 서비스에 따른 파일 생성 방법은 다음과 같으며, 도 6을 참조하여 정보의 흐름에 따라 순차적으로 설명하도록 한다.
이때, 본 발명의 자유시점 AV 서비스에 따른 파일 생성 방법은 상기 자유시점 AV 서비스에 따른 파일 구조 형식에 따라 제작되는 파일을 생성하는 방법이므로, 상기 자유시점 AV 서비스에 따른 파일 구조의 구성을 모두 포함하기 때문에 상세한 내용은 생략하여 설명하기로 한다.
도 6은 본 발명의 일실시예에 따른 자유시점 AV 서비스에 따른 파일 생성 방법을 도시한 흐름도이다.
먼저, 본 발명은 콘텐츠 관련 정보, AV 객체 관련 정보, 프리셋 관련 정보 또는 하나 이상의 프리셋 정보를 포함하는 파일 헤더를 생성한다(S610).
다음으로, 본 발명은 하나 이상의 오디오 객체 정보를 생성한다(S620).
다음으로, 본 발명은 하나 이상의 비디오 객체 정보를 생성한다(S630).
최종적으로, 본 발명은 상기 파일 헤더, 오디오 객체 정보 및 비디오 객체 정보를 하나의 자유시점 AV 파일의 프리셋 형식으로 가공하여 저장한다(S640).
또한, 본 발명의 자유시점 AV 서비스에 따른 파일 재생 방법은 다음과 같으며, 도 7을 참조하여 정보의 흐름에 따라 순차적으로 설명하도록 한다.
이때, 본 발명의 자유시점 AV 서비스에 따른 파일 재생 방법은 상기 자유시점 AV 서비스에 따른 파일 구조 형식에 따라 제작되는 파일을 재생하는 방법이므로, 상기 자유시점 AV 서비스에 따른 파일 구조의 구성을 모두 포함하기 때문에 상세한 내용은 생략하여 설명하기로 한다.
도 7은 본 발명의 일실시예에 따른 자유시점 AV 서비스에 따른 파일 재생 방법을 도시한 흐름도이다.
먼저, 본 발명은 프리셋 형식으로 가공된 자유시점 AV 파일 정보를 수신한다(S710).
다음으로, 본 발명은 상기 자유시점 AV 파일 정보로부터 파일 헤더를 추출한다(S720).
다음으로, 본 발명은 상기 자유시점 AV 파일 정보로부터 하나 이상의 오디오 객체 정보를 추출한다(S730).
다음으로, 본 발명은 상기 자유시점 AV 파일 정보로부터 하나 이상의 비디오 객체 정보를 추출한다(S740).
최종적으로, 본 발명은 상기 추출된 파일 헤더, 오디오 객체 정보 또는 비디오 객체 정보 중 하나 이상을 분석하여 자유시점 AV 파일 정보를 재생한다(S750).
본 발명에 따른 실시예들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(Floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
도 1은 본 발명의 일실시예에 따른 자유시점 AV 서비스에 따른 파일 구조의 구성을 도시한 블록도이다.
도 2는 본 발명의 일실시예에 따른 파일 헤더의 예를 도시한 도면이다.
도 3은 본 발명의 일실시예에 따른 고정 프리셋 관련 정보의 예를 도시한 도면이다.
도 4는 본 발명의 일실시예에 따른 가변 프리셋 관련 정보의 예를 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 자유시점 AV 서비스에 따른 파일 재생 장치의 구성을 도시한 블록도이다.
도 6은 본 발명의 일실시예에 따른 자유시점 AV 서비스에 따른 파일 생성 방법을 도시한 흐름도이다.
도 7은 본 발명의 일실시예에 따른 자유시점 AV 서비스에 따른 파일 재생 방법을 도시한 흐름도이다.
<도면의 주요 부분에 대한 부호의 설명>
100: 자유시점 AV 서비스에 따른 파일 재생 장치
110: 수신부
120: 파일헤더 추출부
130: 오디오 추출부
140: 비디오 추출부
150: 재생부

Claims (17)

  1. 콘텐츠 관련 정보, AV 객체 관련 정보, 프리셋 관련 정보 또는 하나 이상의 편집된 고정 프리셋 관련 정보가 포함된 하나 이상의 프리셋 정보를 포함하는 파일 헤더를 생성하는 단계;
    하나 이상의 오디오 객체 정보를 생성하는 단계;
    하나 이상의 비디오 객체 정보를 생성하는 단계; 및
    상기 파일 헤더, 오디오 객체 정보 및 비디오 객체 정보를 하나의 자유시점 AV 파일의 프리셋 형식으로 가공하여 저장하는 단계
    를 포함하고,
    상기 편집된 고정 프리셋 관련 정보는 고정 프리셋 명, 자유시점 AV 콘텐츠에 포함된 하나 이상의 비디오 객체 정보에 중 선택된 정보를 포함하는 비디오 객체 정보, 줌(Zoom In/Out) 정보가 포함된 비디오 객체 속성 정보, 선택된 오디오 객체 정보에 대한 위치 정보 또는 크기 정보가 포함된 하나 이상의 오디오 객체 정보 또는 오디오 객체 속성 정보 중 어느 하나 이상을 포함하는 것을 특징으로 하는 자유시점 AV 서비스에 따른 파일 생성 방법.
  2. 제1항에 있어서,
    상기 하나 이상의 프리셋 관련 정보는 고정(Constant) 프리셋의 개수 정보 또는 가변(Variable) 프리셋의 개수 정보 중 어느 하나 이상을 포함하는 것을 특징으로 하는 자유시점 AV 서비스에 따른 파일 생성 방법.
  3. 삭제
  4. 삭제
  5. 제1항에 있어서,
    상기 프리셋 정보는 하나 이상의 편집된 가변 프리셋 관련 정보를 포함하고,
    상기 편집된 가변 프리셋 관련 정보는 가변 프리셋 명, 시간 목록(Time Index)의 개수 정보, 상기 시간 목록 별 비디오 객체 변환 속성 정보, 상기 시간 목록 별 비디오 객체 정보, 상기 시간 목록 별 비디오 객체 속성 정보, 상기 시간 목록 별 오디오 객체 정보 또는 상기 시간 목록 별 오디오 객체 속성 정보 중 어느 하나 이상을 포함하는 것을 특징으로 하는 자유시점 AV 서비스에 따른 파일 생성 방법.
  6. 제5항에 있어서,
    상기 시간 목록 별 비디오 객체 변환 속성 정보는, 둘 이상의 비디오 객체가 결합하여 발생하는 효과 정보를 포함하는 것을 특징으로 하는 자유시점 AV 서비스에 따른 파일 생성 방법.
  7. 제1항에 있어서,
    상기 콘텐츠 관련 정보는 콘텐츠 명, 제작자 정보, 장르 정보, 장르 정보 또는 제작일자 정보 중 어느 하나 이상을 포함하는 것을 특징으로 하는 자유시점 AV 서비스에 따른 파일 생성 방법.
  8. 제1항에 있어서,
    상기 AV 객체 관련 정보는, 상기 비디오 객체 정보의 개수 정보, 상기 오디오 객체 정보의 개수 정보 또는 상기 오디오 객체 정보의 재생 시간 정보 중 어느 하나 이상을 포함하는 것을 특징으로 하는 자유시점 AV 서비스에 따른 파일 생성 방법.
  9. 제1항에 있어서,
    상기 파일 헤더, 오디오 객체 정보 및 비디오 객체 정보를 하나의 자유시점 AV 파일의 프리셋 형식으로 가공하여 저장하는 단계는,
    사용자의 설정 시간 정보에 따라 상기 파일 헤더, 오디오 객체 정보 및 비디 오 객체 정보를 하나의 자유시점 AV 파일의 프리셋 형식으로 가공하여 저장하는 것을 특징으로 하는 자유시점 AV 서비스에 따른 파일 생성 방법.
  10. 프리셋 형식으로 가공된 자유시점 AV 파일 정보를 수신하는 단계;
    상기 자유시점 AV 파일 정보로부터 파일 헤더를 추출하는 단계;
    상기 자유시점 AV 파일 정보로부터 하나 이상의 오디오 객체 정보를 추출하는 단계;
    상기 자유시점 AV 파일 정보로부터 하나 이상의 비디오 객체 정보를 추출하는 단계; 및
    상기 추출된 파일 헤더, 오디오 객체 정보 또는 비디오 객체 정보 중 하나 이상을 분석하여 자유시점 AV 파일 정보를 재생하는 단계
    를 포함하고,
    상기 파일 헤더는 콘텐츠 관련 정보, AV 객체 관련 정보, 프리셋 관련 정보 또는 하나 이상의 편집된 고정 프리셋 관련 정보가 포함된 하나 이상의 프리셋 정보를 포함하고,
    상기 편집된 고정 프리셋 관련 정보는 고정 프리셋 명, 자유시점 AV 콘텐츠에 포함된 하나 이상의 비디오 객체 정보에 중 선택된 정보를 포함하는 비디오 객체 정보, 줌(Zoom In/Out) 정보가 포함된 비디오 객체 속성 정보, 선택된 오디오 객체 정보에 대한 위치 정보 또는 크기 정보가 포함된 하나 이상의 오디오 객체 정보 또는 오디오 객체 속성 정보 중 어느 하나 이상을 포함하는 것을 특징으로 하는 자유시점 AV 서비스에 따른 파일 재생 방법.
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 프리셋 형식으로 가공된 자유시점 AV 파일 정보를 수신하는 수신부;
    상기 자유시점 AV 파일 정보로부터 파일 헤더를 추출하는 파일 헤더 추출부;
    상기 자유시점 AV 파일 정보로부터 하나 이상의 오디오 객체 정보를 추출하는 오디오 추출부;
    상기 자유시점 AV 파일 정보로부터 하나 이상의 비디오 객체 정보를 추출하는 비디오 추출부; 및
    상기 추출된 파일 헤더, 오디오 객체 정보 또는 비디오 객체 정보 중 하나 이상을 분석하여 자유시점 AV 파일 정보를 재생하는 재생부
    를 포함하고,
    상기 파일 헤더는 콘텐츠 관련 정보, AV 객체 관련 정보, 프리셋 관련 정보 또는 하나 이상의 편집된 고정 프리셋 관련 정보가 포함된 하나 이상의 프리셋 정보를 포함하고,
    상기 편집된 고정 프리셋 관련 정보는 고정 프리셋 명, 자유시점 AV 콘텐츠에 포함된 하나 이상의 비디오 객체 정보에 중 선택된 정보를 포함하는 비디오 객체 정보, 줌(Zoom In/Out) 정보가 포함된 비디오 객체 속성 정보, 선택된 오디오 객체 정보에 대한 위치 정보 또는 크기 정보가 포함된 하나 이상의 오디오 객체 정보 또는 오디오 객체 속성 정보 중 어느 하나 이상을 포함하는 것을 특징으로 하는 자유시점 AV 서비스에 따른 파일 재생 장치.
  17. 삭제
KR1020080066484A 2008-07-09 2008-07-09 자유시점 ａｖ 서비스에 따른 파일 생성 방법 KR100963005B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020080066484A KR100963005B1 (ko) 2008-07-09 2008-07-09 자유시점 ａｖ 서비스에 따른 파일 생성 방법
CN2008801310135A CN102150424B (zh) 2008-07-09 2008-10-07 根据自由视角av服务的文件生成方法
PCT/KR2008/005881 WO2010005149A1 (en) 2008-07-09 2008-10-07 Method for file formation according to freeview av service
US13/003,188 US9197908B2 (en) 2008-07-09 2008-10-07 Method for file formation according to freeview AV service

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080066484A KR100963005B1 (ko) 2008-07-09 2008-07-09 자유시점 ａｖ 서비스에 따른 파일 생성 방법

Publications (2)

Publication Number Publication Date
KR20100006300A KR20100006300A (ko) 2010-01-19
KR100963005B1 true KR100963005B1 (ko) 2010-06-10

Family

ID=41507237

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080066484A KR100963005B1 (ko) 2008-07-09 2008-07-09 자유시점 ａｖ 서비스에 따른 파일 생성 방법

Country Status (4)

Country Link
US (1) US9197908B2 (ko)
KR (1) KR100963005B1 (ko)
CN (1) CN102150424B (ko)
WO (1) WO2010005149A1 (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2426929A1 (en) 2010-09-06 2012-03-07 Telefonaktiebolaget L M Ericsson AB (Publ) Viewpoint navigation
KR101536747B1 (ko) * 2014-03-04 2015-07-23 서울과학기술대학교 산학협력단 자유 시점 영상 전송을 위한 패킷구조형 송신장치 및 송신방법
KR101646867B1 (ko) 2015-02-23 2016-08-09 서울과학기술대학교 산학협력단 마이크로폰 위치정보를 이용하는 ftv 입체음향 구현 장치 및 그 방법
CN105989845B (zh) 2015-02-25 2020-12-08 杜比实验室特许公司 视频内容协助的音频对象提取
US10628009B2 (en) 2015-06-26 2020-04-21 Rovi Guides, Inc. Systems and methods for automatic formatting of images for media assets based on user profile
US10225031B2 (en) 2016-11-02 2019-03-05 The Nielsen Company (US) Methods and apparatus for increasing the robustness of media signatures
KR101950852B1 (ko) * 2017-12-06 2019-02-21 서울과학기술대학교 산학협력단 메타데이터를 이용한 자유선택시점 영상 제공 장치 및 방법
CN110971961B (zh) * 2018-09-30 2023-02-17 北京奇虎科技有限公司 音视频播放方法及装置
KR102184131B1 (ko) * 2018-12-14 2020-11-27 포디리플레이코리아 주식회사 입체 오디오를 제공하는 다채널 전송 시스템 및 이의 제어 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100733965B1 (ko) * 2005-11-01 2007-06-29 한국전자통신연구원 객체기반 오디오 전송/수신 시스템 및 그 방법

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030040962A1 (en) * 1997-06-12 2003-02-27 Lewis William H. System and data management and on-demand rental and purchase of digital data products
US6904227B1 (en) * 1999-02-15 2005-06-07 Nec Corporation Device and method for editing video and/or audio data recorded in a disc storage medium
JP4683253B2 (ja) * 2000-07-14 2011-05-18 ソニー株式会社 Ａｖ信号処理装置および方法、プログラム、並びに記録媒体
US7861169B2 (en) * 2001-11-19 2010-12-28 Ricoh Co. Ltd. Multimedia print driver dialog interfaces
US7558296B2 (en) * 2002-06-26 2009-07-07 Panasonic Corporation Multiplexer and demultiplexer
EP1597646A2 (en) * 2003-02-04 2005-11-23 Canonline Global Media, Inc. Method and apparatus for converting objects between weakly and strongly typed programming frameworks
GB0311140D0 (en) * 2003-05-15 2003-06-18 Koninkl Philips Electronics Nv Audiovisual playback
US7324594B2 (en) * 2003-11-26 2008-01-29 Mitsubishi Electric Research Laboratories, Inc. Method for encoding and decoding free viewpoint videos
JP4774820B2 (ja) * 2004-06-16 2011-09-14 株式会社日立製作所 電子透かし埋め込み方法
US7292257B2 (en) 2004-06-28 2007-11-06 Microsoft Corporation Interactive viewpoint video system and process
GB2423659A (en) * 2005-02-24 2006-08-30 I-Zone Tv Limited Creating interactive television programmes using frameworks
KR100747550B1 (ko) 2005-12-09 2007-08-08 한국전자통신연구원 Ｄｍｂ 기반의 3차원 입체영상 서비스 제공 방법과, ｄｍｂ기반의 3차원 입체영상 서비스를 위한 복호화 장치 및 그방법
US20080147558A1 (en) * 2006-10-24 2008-06-19 Robert Korbin Kraus Method and system for providing prospective licensees and/or purchasers with access to licensable media content
KR100924170B1 (ko) 2006-12-04 2009-10-28 한국전자통신연구원 전송 효율을 높이기 위한 다시점 파노라믹 콘텐츠 송/수신시스템 및 그 방법
US8595492B2 (en) * 2008-08-21 2013-11-26 PIX System, LLC On-demand protection and authorization of playback of media assets

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100733965B1 (ko) * 2005-11-01 2007-06-29 한국전자통신연구원 객체기반 오디오 전송/수신 시스템 및 그 방법

Also Published As

Publication number Publication date
CN102150424A (zh) 2011-08-10
US20110160886A1 (en) 2011-06-30
KR20100006300A (ko) 2010-01-19
US9197908B2 (en) 2015-11-24
CN102150424B (zh) 2013-07-31
WO2010005149A1 (en) 2010-01-14

Similar Documents

Publication Publication Date Title
KR100963005B1 (ko) 자유시점 ａｖ 서비스에 따른 파일 생성 방법
KR100868475B1 (ko) 객체기반 오디오 서비스를 위한 다중객체 오디오 콘텐츠파일의 생성, 편집 및 재생 방법과, 오디오 프리셋 생성방법
JP5514803B2 (ja) オブジェクトベースのオーディオコンテンツの生成／再生方法、およびオブジェクトベースのオーディオサービスのためのファイルフォーマット構造を有するデータを記録したコンピュータ読み出し可能記録媒体
US8504591B2 (en) Data generating device and data generating method, and data processing device and data processing method
KR102551081B1 (ko) 고품질의 경험을 위한 오디오 메시지들의 효율적인 전달 및 사용을 위한 방법 및 장치
KR100956160B1 (ko) 부호화/복호화 방법 및 장치.
KR101257386B1 (ko) 통합 멀티미디어 파일 구조를 이용한 3ｄ 멀티미디어콘텐츠 서비스 시스템 및 방법
KR102243395B1 (ko) 오디오 부호화 장치 및 방법, 오디오 복호화 장치 및 방법, 오디오 재생 장치
JP2012217144A (ja) 画像編集装置、画像編集方法、およびプログラム
KR101432994B1 (ko) 미디어 객체 기반 메타데이터의 생성 방법, 재생 방법 및그 장치
WO2021065605A1 (ja) 情報処理装置および情報処理方法
JP2006528864A (ja) シナリオを記録した情報記録媒体、記録装置及び記録方法、その情報記録媒体の再生装置及びシナリオの検索方法
KR20050012101A (ko) 시나리오를 기록한 정보저장매체, 기록장치 및 기록방법,그 정보저장매체의 재생장치 및 시나리오의 검색방법
JP2016072858A (ja) メディアデータ生成方法、メディアデータ再生方法、メディアデータ生成装置、メディアデータ再生装置、コンピュータ読み取り可能な記録媒体、及びプログラム
JP2009089350A (ja) ネットワーク基盤のカスタマイズコンテンツを提供するためのユーザ装置及びその方法並びに著作装置及びその方法
KR102149019B1 (ko) 객체기반 오디오 컨텐츠의 생성/재생 방법 및 객체기반 오디오 서비스를 위한 파일 포맷 구조를 가진 데이터를 기록한 컴퓨터 판독 가능 기록 매체
JP2010086615A (ja) 多重化装置およびプログラムおよび多重化方法
KR101212692B1 (ko) 미디어 재생 방법 및 장치와 이를 위한 미디어 파일 포맷
KR101275555B1 (ko) 멀티 미디어 재생 방법 및 장치와 이를 위한 멀티 미디어파일 포맷
KR20090015744A (ko) 객체 미디어 교체가 가능한 멀티미디어 데이터 생성 방법및 장치 그리고 재구성 방법 및 장치
JP2009239695A (ja) コンテンツ再生装置
KR20090091034A (ko) 정보 처리 장치 및 방법과 프로그램
KR20120097693A (ko) 콘텐츠를 생성하고 재생하는 장치 및 방법, 그 콘텐츠가 기록된 기록매체

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130527

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140529

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150527

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160527

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20170529

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20190527

Year of fee payment: 10