KR20140039266A - 확장 미디어 레코딩 및 재생 - Google Patents

확장 미디어 레코딩 및 재생 Download PDF

Info

Publication number
KR20140039266A
KR20140039266A KR1020147000296A KR20147000296A KR20140039266A KR 20140039266 A KR20140039266 A KR 20140039266A KR 1020147000296 A KR1020147000296 A KR 1020147000296A KR 20147000296 A KR20147000296 A KR 20147000296A KR 20140039266 A KR20140039266 A KR 20140039266A
Authority
KR
South Korea
Prior art keywords
extended
media file
computer device
processing
extended media
Prior art date
Application number
KR1020147000296A
Other languages
English (en)
Inventor
알렉산더 제이. 카반닐라
조나단 셸드릭
로버트 타웁
Original Assignee
뮤즈아미, 인크
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 뮤즈아미, 인크 filed Critical 뮤즈아미, 인크
Publication of KR20140039266A publication Critical patent/KR20140039266A/ko

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/3027Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is digitally coded
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Stored Programmes (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

확장 피처들은 종래의 미디어 컨테이너 포맷으로 확장 미디어 파일에 저장된 확장 피처 데이터에 의해 제공된다. 확장 피처 데이터는 적합하게 구성되는 확장 미디어 파일 애플리케이션이 없는 사용자를 위한 미디어 파일의 종래의 재생 경험을 생성하는 종래의 재생 애플리케이션에 의해 인식되지 않는다. 확장 피처 데이터는 확장 미디어 파일의 재생과 함께 확장 사용자 피처들 및 상호 작용을 지원하기 위해 사용자 입력들에 응답하며 확장 피처 데이터를 프로세싱하는 적합하게 구성되는 확장 미디어 파일 애플리케이션에 의해 인식된다.

Description

확장 미디어 레코딩 및 재생{ENHANCED MEDIA RECORDING AND PLAYBACK}
[0001] 본 출원은 2011년 6월 5일에 출원된 J. Alexander Cabanilla, Jonathan Sheldrick, Robert Taub에 대해 "Enhanced Media Recordings and Playback"이란 명칭으로 공동-계류중인 미국 가특허출원 일련번호 제 61/493,476 호의 우선권의 이익을 주장한다. 2011년 6월 5일의 출원 날짜의 우선권은 본원에 주장되며, 가특허출원의 개시는 본원에 인용에 의해 포함된다.
[0002] 음악과 같은 레코딩된 프로그래밍을 청취하는 것은 소비자들에게 대단히 인기가 있으며 그들의 작품들을 배포하는 회사들 및 아티스트들을 레코딩하는데 꽤 유리할 수 있다. 예를 들어, 레코딩된 노래들의 수백만의 카피들이 하드 카피 및 전자 포맷들 둘 다에서 매일 구매된다. 미디어 레코딩들의 하드 카피 매출들은 콤팩트 디스크(CD), 디지털 비디오 디스크(DVD), 또는 블루-레이 디스크(BD)와 같은 광학 디스크들 및 비닐 레코드들의 매출들을 포함한다. 전자 포맷들은 예를 들어, "아이튠즈(iTunes)" 및 "아마존(Amazon)" 온라인 소매업자들과 같은 서비스들을 통해 다운로딩되는 MP3, MPEG4 및 AAC 파일들을 포함한다. 레코딩된 프로그래밍은 하드 카피 레코딩들 상에 또는 전자 포맷들로 레코딩되는 오디오 노래들 및 멀티미디어 파일들을 포함할 수 있다. 예를 들어, 노래들은 레코드 또는 광학 디스크의 트랙들에 레코딩될 수 있다. 멀티미디어 파일들은 멀티미디어 파일의 챕터들에 레코딩되는, 영화들, 텔레비전 쇼들, 뮤직 비디오들, 게임들 등을 포함할 수 있다. 레코딩된 프로그래밍의 재생(playback)은 플레이어가 구매된 카피의 포맷과 호환가능할 것을 요구한다. 하드 카피의 대부분의 매출들, 및 전자 포맷 미디어의 모든 매출들은 오리지널 작품의 디지털로 인코딩된 표현들이다.
[0003] 레코딩된 프로그래밍의 매출들에서의 성장은 지속적으로 매출들을 증가시킨 수 년들 후에, 20년에 걸쳐 문제가 되어왔다. 재생 경험이 더 상호 작용할 수 있으며 청취자에 대해 관계할 수 있는 경우에 레코딩된 프로그래밍에서의 관심이 증가될 수 있다. 별개의 왼쪽 오디오 채널 및 별개의 오른쪽 오디오 채널을 갖는 스테레오 레코딩들은 20세기 초반 이후로 이용되어왔다. 전자 포맷으로 레코딩된 오디오의 재생은 재생 애플리케이션들을 실행하며, 전형적으로 데스크톱 및 랩톱 컴퓨터들, 이동 전화들, 휴대용 플레이어들 및 태블릿 컴퓨터들과 같은 디바이스들로 통합되는 컴퓨터 프로세서들로 달성된다.
[0004] 멀티미디어 파일과 같은 레코딩된 프로그램은 노래들, 구어(spoken word) 레코딩들, 영화들, 텔레비전 쇼들 등을 포함할 수 있다. 다수의 컴퓨터 재생 애플리케이션들은 예를 들어, 노래 타이틀, 아티스트, 레코딩의 년도, 가사, 장르, 사용자 평가(rating) 등과 같은 작업에 관련된 데이터의 디스플레이를 허용한다. 그와 같은 관련된 데이터는 일반적으로 메타데이터로 지칭되며, 레코딩된 프로그래밍 자체로 전기적으로 저장되지만, 작품 자체의 일부를 형성하지 않는다. 메타데이터는 사용자에게 제공된 대로 작품에 포함될 수 있거나, 메타데이터의 일부 또는 전부는 작품과 관련되도록 적합한 사용자 인터페이스를 통해 사용자에 의해 공급될 수 있다. 메타데이터는 재생 동안 오디오 작품의 향유(enjoyment)에 추가할 수 있으며 사용자 라이브러리의 작품들의 사용자 향유 및 편의를 증가시킬 수 있다. 작품 자체 및/또는 그의 일부분들은 스트리밍 및 클라우드-기반된 애플리케이션들에 따라, 재생을 위해 서버를 거쳐 네트워크를 통해 온라인으로 획득될 수 있거나, CD, DVD 또는 BD로부터와 같은 물리적 카피로부터 획득될 수 있다.
[0005] 메타데이터의 종래의 형태들은 다소 제한적이며, 일반적으로 아티스트, 타이틀, 가사 등과 같은 텍스트 데이터, 및 앨범 아트워크와 같은 그래픽들 데이터로 국한된다. 그와 같은 타입들의 메타데이터는 레코딩된 프로그래밍의 비교적 수동적인 즐거움을 위해 일반적으로 적합하지만, 재생 동안 더 상호 작용하는 경험은 사용자 즐거움을 증가시킬 것이다.
[0006] 확장 미디어 파일을 포함하는 레코딩된 멀티미디어 파일로 달리 이용 가능하지않는 한 사용자 상호 작용을 지원하는 확장 피처들(features)이 개시된다. 확장 미디어 파일은 적합하게 구성되는 확장 미디어 파일 애플리케이션이 확장 사용자 피처들을 활성화할 수 있도록, 그리고 확장 사용자 피처들이 없다고 하더라도, 종래의 재생 애플리케이션이 확장 미디어 파일의 재생을 지원할 수 있도록 제공된다. 즉, 확장 미디어 파일은 종래의 재생 애플리케이션에 의해 인식될 수 있는 종래의 미디어 컨테이너 포맷으로 제공된다. 따라서, 확장 미디어 파일은 청취 및 뷰잉(viewing)을 위해 종래의 재생 디바이스들과 역방향-호환가능한 한편, 적합하게 구성되는 확장 미디어 파일 애플리케이션들은 확장 사용자 피처들을 지원할 수 있다. 확장 사용자 피처들은 종래의 미디어 컨테이너 포맷으로 확장 미디어 파일이 저장된 피처 데이터에 의해 제공된다. 피처 데이터는 종래의 재생 애플리케이션에 의해 인식되지 않으며 종래의 플레이어에 의해 무시되며, 종래의 플레이어는 적합하게 구성되는 확장 미디어 파일 애플리케이션이 없는 사용자에 대한 미디어 파일의 종래의 재생 경험을 생성한다. 피처 데이터는 적합하게 구성되는 확장 미디어 파일 애플리케이션에 의해 인식되며, 이 애플리케이션은 피처 데이터를 프로세싱하고 레코딩된 프로그래밍의 프로세싱과 함께, 확장 사용자 피처들 및 사용자 상호 작용을 지원하기 위해 사용자 입력들에 응답한다.
[0007] 종래의 미디어 컨테이너 포맷은 예를 들어, "m4a" 오디오 파일 포맷 또는 "mp3" 오디오 파일 포맷, 또는 "mp4" 포맷과 같은 멀티미디어 또는 비디오 포맷들을 포함하는 임의의 다른 적합한 파일 구성을 포함할 수 있다. m4a 및 mp3 양쪽의 포맷들은 USA 캘리포니아 쿠퍼티노(Cupertino)의 애플사에 의한 "아이튠즈" 재생 애플리케이션으로의 오디오 파일들에 대해 현재 이용된다. m4a 파일 포맷은 왼쪽 및 오른쪽 오디오 트랙들을 위한 데이터의 표준 채널들뿐 아니라 아티스트, 타이틀, 앨범, 아트워크, 가사 등과 같은 트랙 정보를 위한 m4a 메타데이터를 포함한다. 본원에 설명된 피처 데이터는 적합하게 구성되는 확장 미디어 파일 애플리케이션에 독점적이며 메타데이터를 위한 오디오 파일 포맷으로 예약된 데이터의 추가적인 채널들에 저장된다. 피처 데이터는 바람직하게는 적합하게 구성되는 확장 미디어 파일 애플리케이션이 독점적인 피처 데이터를 이용할 수 있으며 확장 사용자 피처들을 생성할 수 있도록 암호화된다. 암호화된 피처 데이터는 비-구성된 재생 애플리케이션들에 의해 판독될 수 없으며, 이 재생 애플리케이션은 종래의 오디오 재생을 위한 데이터의 종래의 표준 채널들을 판독한다. 피처 데이터가 디바이스 재생 애플리케이션에 의해 액세스될 수 있을 때조차, 액세스된 데이터는 재생 애플리케이션에 의해 인식되지 않을 것이며 일반적으로 재생 애플리케이션에 의해 무시되며, 재생 애플리케이션은 그 작품에 대한 종래 데이터의 프로세싱을 계속할 것이다. 이러한 방식으로, 확장 미디어 파일은 종래의 재생 경험을 위해 비-구성된 재생 애플리케이션들로 이용될 수 있으며, 확장 사용자 피처들을 지원하기 위해 적합하게 구성되는 확장 미디어 파일 애플리케이션들로 이용될 수 있다.
[0008] 본 발명의 다른 피처들 및 장점들은 예시로서, 본 발명의 원리들을 예시하는 바람직한 실시예들의 다음의 설명으로부터 명백해질 것이다.
[0009] 도 1은 디바이스 상에 실행하는 종래의 미디어 파일 재생 애플리케이션에 대한 사용자 인터페이스를 도시하는 디스플레이를 갖는 태블릿 컴퓨터 디바이스의 표현이다.
[0010] 도 2는 디바이스 상에 실행하고, 디바이스의 포트레이트 배향에서의 파일 제어들을 예시하는, 본원에 개시된 바와 같은 확장 미디어 파일 애플리케이션의 사용자 인터페이스 트랙 메뉴 스크린을 도시하는 디스플레이를 갖는 테이블 컴퓨터 디바이스의 표현이다.
[0011] 도 3은 사용자 데이터를 확장 미디어 파일에 첨부하기 위한 다이얼로그 박스를 갖는 사용자 인터페이스를 도시하는 확장 미디어 파일 애플리케이션의 디스플레이를 갖는 태블릿 컴퓨터 디바이스의 표현이다.
[0012] 도 4는 첨부된 트랙 선택 메뉴 스크린을 위한 사용자 인터페이스를 도시하는 확장 미디어 파일 애플리케이션의 디스플레이를 갖는 테이블 컴퓨터 디바이스의 표현이다.
[0013] 도 5는 디바이스의 랜드스케이프 배향에서의 가사 및 사운드 조정 제어들을 예시하는, 본원에 개시된 바와 같은 확장 미디어 파일 재생 애플리케이션을 위한 사용자 인터페이스를 도시하는 확장 미디어 파일 애플리케이션의 디스플레이를 갖는 테이블 컴퓨터 디바이스의 표현이다.
[0014] 도 6은 또한 홈 스크린 디스플레이로 지칭되는, 트랙 선택 스크린을 위한 사용자 인터페이스를 도시하는 확장 미디어 파일 애플리케이션의 디스플레이를 갖는 테이블 컴퓨터 디바이스의 표현이다.
[0015] 도 7은 본원에 개시된 바와 같은 피처들을 갖는 확장 미디어 파일을 생성하는 개략적 표현이다.
[0016] 도 8은 종래의 미디어 플레이어에 의해 확장 미디어 파일의 재생을 예시하는 블록도이다.
[0017] 도 9는 확장 미디어 파일 애플리케이션에 의한 레코딩된 프로그래밍의 종래의 미디어 파일의 재생을 예시하는 블록도이다.
[0018] 도 10은 확장 미디어 파일 애플리케이션에 의한 확장 미디어 파일의 프로세싱을 예시하는 블록도이다.
[0019] 도 11은 재생 시에 확장 미디어 파일의 일 예를 도시하며 확장 미디어 파일의 프로세싱 동안 이용 가능한 확장 사용자 피처들을 예시한다.
[0020] 도 12는 프로세싱 동안 확장 사용자 피처들의 지원을 위해 적합하게 구성되는 확장 미디어 파일 애플리케이션을 갖는 디바이스의 블록도이다.
[0021] 도 13은 본원에 논의된 바와 같은 확장 미디어 파일의 프로세싱과 함께 확장 사용자 피처들을 제공하기 위한 디바이스 동작들의 흐름도이다.
[0022] 본원에 개시되는 확장 미디어 파일 애플리케이션은 수동 미디어 재생 경험을 더 참여적인 상호 작용 경험으로 확장한다. 이러한 목표는 확장 사용자 피처들을 제공하는 독점적인 프로세싱과 함께 다수의 미디어 트랙들(또한 "스템들"로서 칭해짐)을 포함하는 확장 미디어 파일로 실현된다. 본원에 이용되는 바와 같이, CD 앨범은 또한 노래들로 칭해지는 다수의 앨범 트랙들을 포함하도록 이해될 것이며, DVD 또는 BD 멀티미디어 파일은 또한 영화 세그먼트들로 칭해지는 다수의 챕터들을 포함하도록 이해될 것이다. 단일 앨범 트랙 또는 멀티미디어 챕터는 오디오 스템들, 비디오 스템들 및 데이터 스템들로 각각 상호교환가능하게 지칭될, 다수의 오디오 트랙들, 비디오 트랙들 및 데이터 트랙들과 같은 데이터의 다수의 트랙들 또는 스템들을 포함할 수 있다. 이들 타입들의 스템들 전부는 단일의 확장 미디어 파일의 일부분을 포함한다. 확장 미디어 파일은 일 스템 타입의 다수의 스템들을 포함할 수 있다. 예를 들어, 확장 미디어 파일의 오디오 스템들은 보컬 스템 및 연주(instrumental)(음악) 스템을 포함할 수 있다. 추가적인 확장들은 대화 방식으로 상기 확장 피처들의 조합에 관련할 수 있다. 예를 들어, 상호 작용 조합은 가라오케 게임과 같은 게임 경험을 제공할 수 있다. 확장 미디어 파일은 컨테이너가 "m4a" 접미사를 갖는 파일들을 재생하는 USA 캘리포니아 쿠퍼티노의 애플사로부터의 "아이튠즈" 플레이어와 같은 종래의 미디어 플레이어들과 호환가능하도록 종래의 미디어 파일 컨테이너에 포함되는, 본원에 설명된 피처들을 제공하기 위해 충분한 데이터를 포함한다. 종래의 미디어 플레이어는 m4a 접미사를 갖는 종래의 미디어 파일들을 재생할 수 있으며, 어려움 없이 확장 미디어 파일의 비-확장 부분을 재생할 수 있지만, 확장 미디어 파일의 확장 부분을 포함하는 피처 데이터를 무시할 것이며, 이 확장 미디어 파일은 m4a 접미사(또는 사용자 선호도에 따른 다른 파일 접미사)를 갖는 파일 내에 포함될 것이다. MP3, WAV, MPEG-4 및 퀵타임(비디오)과 같은 서로 다른 파일 접미사로 특정된 파일 포맷들을 포함하는, 다른 타입들의 파일 컨테이너들이 또한 이용될 수 있다. 그와 같은 대안적인 파일 컨테이너들은 비록 확장 사용자 피처들이 확장 미디어 파일 애플리케이션의 개시된 독점 프로세싱으로만 이용 가능하더라도, 종래의 재생 애플리케이션들 및 개시되는 확장 미디어 파일 애플리케이션 둘 다에 의한 확장 미디어 파일의 재생을 허용한다.
[0023] 본원에 개시되는 확장 미디어 파일 애플리케이션은 호스트 디바이스 상에 설치된다. 이하에 더 설명되는 바와 같이, 호스트 디바이스는 다양한 컴퓨팅 플랫폼들을 포함할 수 있다. 호스트 디바이스는 또한 애플사에 의한 "아이튠즈" 애플리케이션 및 USA 워싱턴 레드몬드의 마이크로소프트사에 의한 "윈도우즈 미디어 플레이어"와 같은 종래의 멀티미디어 플레이어를 포함하는, 추가적인 멀티미디어 애플리케이션들을 호스트할 수 있다. 종래의 미디어 플레이어가 확장 미디어 파일의 재생시에 확장 사용자 피처들을 생성하는 기능을 갖지 않기 때문에, 종래의 미디어 플레이어는 확장 미디어 파일을 재생할 때 종래의 사용자 경험을 제공할 것이다. 확장 미디어 파일이 본원에 개시된 필요한 독점의 프로세싱이 인에이블된 플레이어에 의해 재생될 때, 인에이블된 플레이어는 이하에 더 설명되는 확장 사용자 피처들을 갖는 강화된 사용자 경험을 생성할 것이다.
[0024] 확장 미디어 파일 애플리케이션은 확장 미디어 파일의 오디오 및 비디오 출력 데이터를 재생성하기 위해 호스트 디바이스의 자원들을 이용할 수 있다. 그와 같은 자원들은 예를 들어, 호스트 디바이스 상에 설치되는 운영 시스템의 다양한 코덱들 및 프로세서들을 포함할 수 있다. 당업자는 확장 미디어 파일 애플리케이션과 같은 애플리케이션들이 그와 같은 시스템 자원들을 호출하고 이용할 수 있는 방법을 이해할 것이다. 확장 미디어 파일 애플리케이션 자체는 확장 피처들을 제공하기 위해 그리고 확장 미디어 파일의 오디오 및 비디오 출력의 재생성을 제공하기 위해 필요에 따라 코덱들, 프로세서들 및 다른 자원들을 포함할 수 있다. 본원에 개시된 바와 같이, 확장 미디어 파일에서의 앨범 트랙들 및 비디오 챕터들의 오디오 및 비디오 스템들은 종래의 레코딩된 프로그래밍의 대응하는 "종래의 버전" 및 확장 미디어 파일에 공통일 수 있다. 호스트 디바이스 상의 종래의 재생 애플리케이션은 종래의 레코딩된 프로그래밍의 오디오 및 비디오 출력 데이터를 재생성하기 위해 호스트 디바이스의 자원들을 이용할 수 있다. 종래의 재생 애플리케이션이 확장 미디어 파일의 재생을 위해 선택되는 경우에, 종래의 재생 애플리케이션은 종래의 재생 애플리케이션에 의해 프로세싱될 수 있는 확장 미디어 파일에서의 앨범 트랙들 및 비디오 챕터들의 오디오 및 비디오 스템들만을 프로세싱할 것이다.
[0025] 확장 미디어 파일의 식별자로서 m4a 포맷과 같은 잘-알려진 파일 포맷을 이용하는 것은 편리한데, 그 포맷이 대중적이며 파일 툴들이 용이하게 이용 가능하기 때문이다. 예를 들어, 아이튠즈 m4a 오디오 파일은 애플사로부터 이용 가능한 "Mac OS X" 운영 시스템에서 이용 가능한 표준 툴들을 이용하여 구축될 수 있다. 메타데이터를 MPEG-4 파일들로 그리고 특히, m4a 포맷 파일들로 판독, 파싱 및 세팅하기 위해 다른 제 3-파티 툴들이 용이하게 이용 가능하다. 하나의 그와 같은 툴은 예를 들어, 메타데이터를 편집하기 위해 이용될 수 있는, 프리웨어 "atomicparsely" 툴이다. 당업자는 적절한 포맷의 파일들을 생성하기 위해 그리고 그와 같은 파일들과 관련된 메타데이터를 편집하기 위한 대안적인 툴들과 친숙할 것이다. 상기에 주목된 바와 같이, 대안적인 파일 포맷들은 확장 미디어 파일의 식별자로서 이용될 수 있다.
[0026] 도 1은 본원에 개시된 바와 같은 확장 미디어 파일 재생 애플리케이션 및 종래의 재생 애플리케이션이 설치되는 태블릿 컴퓨터 디바이스(100)를 도시한다. 태블릿 컴퓨터 디바이스(100)는 USA 캘리포니아 쿠퍼티노의 애플사로부터 이용 가능한 "아이패드(iPAD)" 태블릿 컴퓨터와 같은 디바이스를 포함할 수 있거나 남한 서울의 삼성 전자(주)로부터 이용 가능한 "갤럭시 탭" 태블릿 컴퓨터와 같은 디바이스를 포함할 수 있다. 태블릿 컴퓨터 디바이스는 디스플레이(102)를 포함하는 실질적으로 평탄한 형상을 갖는다. 도 1의 디스플레이는 디바이스 상에 설치되고 디바이스 프로세서에 의해 실행되는 종래의 재생 애플리케이션의 사용자 인터페이스 윈도우(104)를 도시한다. 디스플레이(102)는 태블릿 디바이스가 멀티미디어 파일의 재생을 수행하는데 응답하여, 사용자 인터페이스 윈도우의 심벌들이 사용자 터치에 의해 선택될 수 있도록 터치스크린 인터페이스를 제공한다. 예시된 사용자 인터페이스 윈도우(104)의 바닥은 파일의 재생을 개시하기 위해 선택되는 "재생" 디스플레이 버튼(106), 재생을 멈추기 위해 선택되는 "중지" 버튼(108), 및 트랙들의 라이브러리 또는 재생목록에서의 트랙이나 다음 파일을 선택하기 위해 "다음" 버튼(110)을 포함하는 재생 제어들을 포함한다. 사용자 인터페이스 윈도우(104)는 또한 재생 볼륨 레벨을 지속적으로 조정하기 위해 이동될 수 있는 슬라이더 볼륨 제어(112)를 포함한다. 사용자 인터페이스 윈도우의 최상부는 재생되는 파일에 대한 곡명 또는 트랙 타이틀(114), 파일에 대한 아티스트명(116) 및 파일에 대한 앨범 또는 수집 작품 명칭(118)뿐 아니라 파일과 관련된 커버 아트 또는 다른 그래픽들 이미지(120)의 심벌 또는 텍스트를 도시한다.
[0027] 도 2는 본원에 개시된 바와 같은 확장 미디어 파일 애플리케이션의 사용자 인터페이스 트랙 메뉴 스크린(220)이 도시되는 디스플레이(102)를 갖는 태블릿 컴퓨터 디바이스(100)를 도시한다. 확장 미디어 파일 애플리케이션은 디바이스(100)의 프로세서에 의해 실행된다. 디바이스는 2개의 평행한 긴 왼쪽 및 오른쪽 측면들(222 및 224) 각각을 가지며, 2개의 평행한 더 짧은 최상부 및 바닥 측면들(226 및 228) 각각을 갖는다. 따라서, 디바이스는 포트레이트(portrait) 배향으로 공통으로 지칭되는 배향에서 도 2에 예시된다. 예시된 사용자 인터페이스 스크린(220)의 바닥은 본원에 개시된 바와 같은 확장 미디어 파일의 재생을 개시하기 위해 선택되는 "재생" 디스플레이 버튼(230)을 포함하는 재생 제어들을 도시한다. 확장 미디어 파일 애플리케이션을 위한 사용자 인터페이스 윈도우는 재생을 멈추기 위해 선택되는 "중지" 버튼(232), 및 마이크로폰 또는 선택된 파일로부터의 사용자 입력과 같은 사용자 데이터 입력을 레코딩하는 것을 개시하기 위해 이용되는 "사용자 데이터 입력 레코드" 버튼(234)을 포함한다. "사용자 데이터 입력 레코드" 버튼(234)은 예를 들어, 이하에 더 상세하게 설명된 바와 같은 사용자의 다른 성능 또는 따라부르기(sing-along) 보컬 기여를 레코딩하는데 유용하다. 사용자 인터페이스 트랙 메뉴 스크린(220)의 최상부는 재생되는 확장 미디어 파일에 대한 곡명 또는 트랙 타이틀(236), 파일에 대한 아티스트명(238) 및 파일에 대한 앨범 또는 수집 작품 명칭(240)뿐 아니라 파일과 관련된 커버 아트 또는 다른 그래픽들 이미지(242)의 심벌 또는 텍스트를 도시한다. 이전에 주목된 바와 같이, 단일의 확장 미디어 파일은 "앨범" 또는 "영화"로 칭해지는 수집 작품으로 그룹화되는 다수의 독립적인 멀티미디어 파일들을 포함할 수 있으며, 그룹화된 독립적인 멀티미디어 파일들은 다수의 앨범 트랙들 또는 영화 챕터들을 포함할 수 있다.
[0028] 트랙 메뉴 스크린(220)은 또한 볼륨 조정 제어들을 포함한다. 도 2의 실시예에서, 볼륨 조정 제어들은 터치스크린 인터페이스를 위한 슬라이더 제어들로서 제공된다. 당업자에게 명백한 바와 같이, 재생 볼륨을 조정하기 위한 제어들의 다른 구성들이 이용될 수 있다. 슬라이더 볼륨 제어들 중 2개는 "연주들" 재생 레벨을 위한 제어(244) 및 "오리지널 보컬들" 재생 레벨을 위한 제어(246)를 포함한다. 다른 볼륨 제어(248)는 이하에 더 설명되는 바와 같이, 레코딩 동안 마이크로폰 레벨의 조정을 허용하기 위한 "마이크 입력"을 위한 것이다. 또한, 트랙 메뉴 스크린(220)에는 이하에 더 설명되는 바와 같이, 기존의 확장 미디어 파일에 집적되도록 오디오 파일로부터 리트리브되는 "사용자 보컬" 데이터의 볼륨 레벨을 조정하기 위한 볼륨 제어(250)가 제공된다. 따라서, 확장 미디어 파일 애플리케이션은 재생 동안 오리지널 보컬들과 연주들의 상대적인 레벨을 독립적으로 조정하고, 재생 동안 확장 미디어 파일의 챕터들 및 트랙들의 스템들과 마이크로폰 입력을 통합하며, 또한 재생 동안 확장 미디어 파일의 챕터들 및 트랙들의 스템들과 오디오 파일로부터의 오디오 입력을 통합하는 피처들을 지원한다.
[0029] 도 2에서, 연주들(244) 및 오리지널 보컬들(246)을 위한 2개의 재생 볼륨 제어들은 사용자에 의한 스와이프(swipe) 또는 슬라이드 모션 및 단일 선택과 조화를 이루며 동시에 함께 이들을 이동시키는 것을 용이하게 하기 위해, 트랙 메뉴 스크린(220)에서 서로 근처에 도시되지만, 이들 제어들은 또한 요망됨에 따라, 서로 독립적으로 이동될 수 있다. 일제히 함께 이동될 때, 연주들 및 오리지널 보컬들 제어들은 파일의 연주 및 보컬들 부분들의 초기 레벨들과 비교하여 실질적으로 동일한 레벨들에서 확장 미디어 파일의 오리지널 보컬 부분(즉, 보컬 스템) 및 연주 부분(즉, 뮤직 스템)의 상대적인 볼륨을 유지할 것이다.
[0030] 도 2의 트랙 메뉴 스크린(220)은 실시간 미디어 이펙트들을 위한 제어들을 포함하는 디스플레이 영역(252)을 도시한다. 미디어 이펙트들은 트랙들의 스템들에 적용될 수 있거나 확장 미디어 파일의 챕터들의 스템들에 적용될 수 있으며, 및/또는 확장 미디어 파일의 챕터들 또는 트랙들의 스템들과 조합되도록 사용자 반주를 포함하는 사용자 데이터 입력에 적용될 수 있으며, 및/또는 레코딩된 사용자 반주를 포함할 수 있는 확장 미디어 파일에 적용될 수 있도록 미디어 이펙트들 세팅들을 포함하는 사용자 데이터 입력에 적용될 수 있다. 출력이 달리 이루어지는 것으로부터 확장 미디어 파일 애플리케이션의 출력을 변경하도록, 그리고 미디어 이펙트들을 제공하거나 특정하는 사용자와 동시적으로 적용되는 미디어 이펙트들의 경험을 사용자에게 제공하도록 확장 미디어 파일의 프로세싱 동안 미디어 이펙트들이 적용된다. 즉, 실시간 미디어 이펙트들은 사용자의 보컬 기여가 사용자 경험들 및 확장 미디어 파일의 챕터들 또는 트랙들의 스템들 둘 다와 동시적으로 조합되도록, 사용자가 입력, 예를 들어 수반하는 보컬 기여를 제공하게 할 수 있으며, 실시간 미디어 이펙트들은 또한 세팅들이 보컬 기여와 같은 임의의 레코딩된 사용자 입력 및 챕터들 또는 스템들을 포함하는 확장 미디어 파일에 적용되도록, 사용자가 입력, 예를 들어, 피치(pitch), 리버브(reverb), 에코, 및/또는 하모니제이션(harmonization)을 위한 세팅들을 제공하게 할 수 있다. 이러한 방식으로, 사용자는 사용자의 보컬 기여를 가라오케와 같은 반주 모드에서 레코딩된 오디오 및/또는 비디오 데이터와 조합할 수 있으며, 사용자는 또한 미디어 이펙트들 세팅들을 상호 작용적으로 레코딩된 가라오케 성능에 적용할 수 있다. 사용자 데이터 입력은 예를 들어, 마이크로폰과 같은 오디오 캡처 디바이스로부터의 데이터를 포함할 수 있다. 마이크로폰 레벨의 제어는 볼륨 슬라이더(248)에 의해 조정될 수 있다. 실시간 미디어 이펙트들은 애플리케이션에 대해, 사용자 데이터 입력 및/또는 확장 미디어 파일의 멀티미디어 챕터들 또는 앨범 트랙들의 데이터 스템들로 단일로 선택될 수 있거나 함께 조합될 수 있거나, 함께 믹싱할 수 있다. 이러한 방식으로, 실시간 미디어 이펙트들을 믹싱함으로써 특이하고 종전에 알려지지 않은 이펙트들을 생성할 수 있다. 미디어 이펙트들의 실시간 애플리케이션은 선택된 미디어 이펙트들의 실질적으로 즉각적인 경험을 제공한다. 미디어 이펙트들은 오디오 변화들, 비디오 변화들 또는 둘 다를 포함할 수 있다.
[0031] 도 2는 사용자에 의한 미디어 이펙트의 선택을 표시하는 다른 적합한 수단 또는 체크 박스에 의해 트랙 메뉴 스크린(220)의 사용자 인터페이스로부터의 이펙트들의 선택을 위한 이펙트들 제어들을 갖는 디스플레이 영역(252)을 도시한다. 도 2에 예시된 미디어 이펙트들은 예를 들어, 피치 교정, 잔향, 하모나이저 및 에코와 같은 오디오 변화들을 포함한다. 이펙트들의 각각은 체크된 체크박스에서와 같이, 턴 온되거나 적용되도록 선택될 수 있거나, 각 이펙트는 체크되지 않은 체크박스에서와 같이, 턴 오프될 수 있다. 상기에 주목된 바와 같이, 다수의 체크박스들을 체크하는 것은 대응하는 체크된 이펙트들을 동시적으로 적용할 것이다. 추가적인 오디오 및/또는 비디오 이펙트들은 요망됨에 따라 디스플레이 영역(252)에서의 사용자 선택을 위해 제공될 수 있다. 예를 들어, 실시간 미디어 이펙트들은: 피치 교정 및 하모니제이션과 같은 피치 변화들; 음성-대-MIDI 변환 및 음성-대-신시사이저(synthesizer) 변환과 같은 음색의 변화들; 타임 스트레칭 및 비트 스플라이싱(splicing)과 같은 리듬 변화들; 잔향, 에코, 트레몰로(tremolo), 링 변조기, 플랜저(flanger), 코러스, 비트 크러셔(bit crusher) 및 오토-와(auto-wah)뿐 아니라 오디오 속도 또는 리듬과 같은 소리의 특성들; 및 비디오 광도 및 비디오 컬러 포화도와 같은 비디오 이펙트들을 포함할 수 있다. 다른 오디오 및 비디오 이펙트들이 당업자에게 발생할 것이다. 확장 미디어 파일 애플리케이션은 도 2의 인터페이스로부터 사용자 선택을 수신하는 프로세싱을 포함할 것이며 선택된 이펙트 또는 이펙트들에 의해 호출되는 프로세싱을 수행할 것이다. 그와 같은 프로세싱은 확장 미디어 파일의 메타데이터에 포함되는 파라미터들에 의해 제어되거나 조정될 수 있다. 확장 미디어 파일 애플리케이션은 프로세싱을 수행하는데 호스트 디바이스의 시스템 자원들을 이용할 수 있다.
[0032] 예를 들어, 하모나이제이션 이펙트에 관하여, 사용자의 음성 또는 다른 입력에 적용되는 하모나이제이션의 타입 또는 실제량은 확장 미디어 파일에 포함된 메타데이터에 의해 서술될 수 있다. 하모나이제이션과 같은 실시간 미디어 이펙트들과 관련하여 확장 미디어 파일 애플리케이션의 프로세싱은 메타데이터에 의해 구성될 수 있으며, 그 후에 프로세싱은 확장 미디어 파일 애플리케이션 및 호스트 디바이스의 시스템 자원들 및 사용자 인터페이스가 그것을 허용하는 경우에 사용자에 의해 더 조정될 수 있다. 확장 미디어 파일 애플리케이션의 개발자는 확장 미디어 파일 애플리케이션에 의해 지원될 사용자 제어의 범위를 결정할 수 있다. 일반적으로, "하모나이저" 이펙트는 사용자가 따라부르기(singing along) 또는 퍼포밍(performing)과 같은 반주를 제공하는 확장 미디어 파일의 챕터 또는 트랙의 재생 동안 사용자 입력을 수신할 것이며, 사용자가 반주를 제공하는 챕터 또는 트랙의 스케일 및 키를 컴플리멘트(complement)하거나 하모나이즈하도록 사용자 입력을 수정하려 시도할 것이다. 그와 같은 반주는 확장 미디어 파일에 저장될 수 있으며 재생 시에 청취될 수 있다. 이하에 더 설명되는 바와 같이, 다수의 사용자 기여들은 원하는 경우에, 확장 미디어 파일에 저장될 수 있다. 따라서, 이용될 수 있는 하모나이저 이펙트는 트랙 또는 챕터와 하모니를 이루는 사용자의 음성 노래의 다수의 인스턴스들의 이펙트를 생성한다.
[0033] 실시간 미디어 이펙트들의 양들은 메타데이터의 구성/자동화 파일들에 발견된 디폴트 세팅에 의해 제어될 수 있다. 디폴트 세팅은 확장 미디어 파일의 콘텐츠 제공자에 의해 결정되는 이펙트 레벨에서 세팅될 수 있다. 대안적인 방식으로, 확장 미디어 파일 애플리케이션은 애플리케이션의 사용자에게 콘텐츠 제공자로부터의 디폴트 세팅과 다르거나 또는 그 대신에, 그들의 취향으로 실시간 미디어 이펙트의 양을 조정하기 위한 제어를 제공할 수 있다. 이러한 사용자-제어된 방식은 멀티-밴드 필터, 예를 들어 트레블(treble), 베이스(bass) 등을 조정하며, 대부분의 사용자들이 친숙한 필터에 대한 개념과 유사한 제어들로 구현될 수 있다. 사용자-제어된 방식으로, 사용자는 확장 미디어 파일의 사용자 데이터 섹션에서의 실시간 미디어 이펙트들의 변화된 양을 저장할 수 있다. 확장 미디어 파일 애플리케이션은 또한 사용자에게 이용 가능한 옵션들로서 양쪽 시나리오들(디폴트 세팅들 및 사용자-제어된 세팅들)을 갖고서 지원할 수 있다.
[0034] 유사한 제어 방식들이 다른 실시간 미디어 이펙트들 세팅들에 적용할 수 있다. 예를 들어, 도 2에 예시된 에코 이펙트를 위한 세팅들은 디폴트 레벨들에 따른 확장 미디어 파일에서의 메타데이터에 의해 결정될 수 있지만, 그들 에코 세팅들은 애플리케이션 및 시스템 자원 사용자 인터페이스가 그와 같은 조정들을 지원하는 경우에 사용자에 의해 잠재적으로 조정될 수 있다.
[0035] 추가로, 실시간 미디어 이펙트들이 토글링 온 및 오프될 수 있다. 예를 들어, 도 2에 도시된 이펙트 버튼들(예를 들어, 에코, 하모나이저 등) 중 하나를 탭함으로써, 대응하는 이펙트 버튼이 조명되거나 강조될 수 있으며 대응하는 이펙트가 활성화될 것이다. 이펙트 버튼이 다시 탭되는 경우에, 대응하는 실시간 미디어 이펙트 버튼은 원래의 시각적 상태로 되돌려지며, 대응하는 실시간 미디어 이펙트는 비활성화되거나 턴 오프된다.
[0036] 실시간 미디어 이펙트들 중 일부는 오로지 메타데이터의 구성 또는 자동화 파일들에 있는 콘텐츠 제공자 데이터에 의해 제어될 수 있다. 그와 같은 이펙트들을 위한 데이터는 확장 미디어 파일의 경과된 재생 시간의 함수로서 특정 타임-온 및 타임-오프 값들로, 콘텐츠 제공자 데이터에 의해 지시된 바와 같이, 애플리케이션에 의한 재생 동안 실시간으로 조정될 수 있다. 그와 같은 이펙트들 제어 레벨들은 단순히 "온" 또는 "오프" 시간들일 필요가 없지만, 또한 제어되는 실시간 미디어 이펙트에 대해 적절한 지정된 값 범위에 걸쳐 정의되는 미리 결정된 수치적 값 또는 규모(예를 들어, 실제-값이거나 계수됨)일 수 있다. 상기에 주목된 바와 같이, 확장 미디어 파일 애플리케이션은 다른 이펙트들에 대한 대안적인 제어들을 제공할 수 있거나 콘텐츠 제공자 디폴트 세팅들을 무효로 할 수 있다. 이러한 피처는 사용자가 실시간 미디어 이펙트들을 온 및 오프하게 또는, 실시간으로 파라미터 값을 조정하게 허용한다.
[0037] 실시간 미디어 이펙트가 앨범 트랙 또는 멀티미디어 챕터의 재생 동안 적용될 때, 사용자는 미디어 이펙트 세팅들을 저장하거나 그들을 제거하며 미디어 이펙트들의 적용 이전처럼 원래의 확장 미디어 파일로 되돌리는 옵션을 갖는다. 사용자는 디스플레이 영역(252)에서 "세팅들 저장" 버튼(254) 또는 "되풀이" 버튼(256)인 디스플레이 버튼을 선택함으로써 이들 2개의 옵션들 사이에서 선택한다. 세팅들이 저장될 때, 확장 미디어 파일 애플리케이션이 저장된 세팅들을 포함하는 확장 미디어 파일의 버전으로 원래의 확장 미디어 파일을 덮어쓰기 하도록, 세팅들에 대응하는 데이터가 확장 미디어 파일에 저장된다. 덮어쓰기 동작은 변화되지 않은 채로 남아있는 트랙 또는 챕터의 원래의 스템들에 대한 변화가 없이, 이펙트 데이터를 갖는 확장 미디어 파일의 사용자 데이터 부분들만을 덮어쓰기하는 것과 관련할 수 있다. 도 2에서, "되풀이" 버튼(256)은 실시간 미디어 이펙트들의 저장을 취소하기 위해 선택될 수 있거나, "되풀이"는 확장 미디어 파일의 현재 재생 동안 저장된 보컬 이펙트들의 적용을 취소하기 위해, 저장된 실시간 보컬 이펙트들을 포함하는 확장 미디어 파일의 재생 시에 선택될 수 있다.
[0038] 따라서, 세팅들 저장 버튼(254)은 확장 미디어 파일에 적용된 미디어 이펙트들을 표시하는 데이터를 첨부함으로써 확장 미디어 파일에 미디어 이펙트들을 적용한다. 첨부된 데이터는 예를 들어, 영향받은 앨범 트랙 또는 멀티미디어 챕터의 관련된 이전의 트랙들에 병렬로 저장되는, 데이터의 추가적인 트랙으로서 저장될 수 있다. 첨부된 미디어 이펙트들을 갖는 확장 멀티미디어 파일이 재생을 위해 프로세싱될 때, 확장 미디어 파일 애플리케이션은 첨부된 세팅들 데이터를 검출하고, 데이터 트랙에 저장된 데이터에 의해 특정된 미디어 이펙트들을 결정하며, 특정된 미디어 이펙트들을 앨범 트랙 또는 멀티미디어 챕터에 적용한다.
[0039] 상기에 주목된 바와 같이, "사용자 데이터 입력 레코딩" 버튼(234)이 트랙 메뉴 스크린(220)에서 선택되는 경우에, 확장 미디어 파일 애플리케이션은 사용자 입력이 마이크로폰 입력을 통해 수신되는 가라오케 동작과 같은 따라부르기 또는 반주 동작 모드를 개시함으로써 응답한다. "사용자 데이터 입력 레코딩" 명령에 더 응답하여, 확장 미디어 파일 애플리케이션은 질문을 도시하고 이전에 레코딩된 사용자 입력의 스템 또는 트랙을 교체하거나, 교체 없이 사용자 입력을 확장 미디어 파일에 추가하는 것에 관한 사용자 선호도를 수신하기 위해 사용자 데이터 입력 다이얼로그 박스를 발생시킨다. 이러한 피처에 대한 사용자 인터페이스는 도 3에 예시된다.
[0040] 도 3은 디스플레이(102) 상에 사용자 데이터 입력 다이얼로그 박스(302)를 도시한다. 다이얼로그 박스(302)는 사용자가 현재 마이크로폰 입력이 이전의 레코딩된 스템 또는 트랙을 덮어쓰기 하기를 원하는 경우에 "덮어쓰기" 버튼(304), 및 사용자가 현재 앨범 트랙 또는 영화 챕터에 대한 마이크로폰 입력의 임의의 이전 트랙들(레코딩들)에 추가적인 스템으로서 현재의 마이크로폰 입력을 첨부하기를 원하는 경우에 "추가" 버튼(306)인, 사용자 선호도에 관한 질문에 응답하기 위한 2개의 입력 버튼들을 포함한다. 덮어쓰기 명령의 경우에, 확장 미디어 파일 애플리케이션은 예를 들어, 최종-레코딩된 반주 트랙을 현재 트랙으로 교체하거나, 애플리케이션은 가장 먼저-레코딩된(가장 오래된) 반주 트랙을 현재 트랙으로 교체할 수 있거나, 교체의 사용자 선택을 위해 메뉴 선택이 제공될 수 있다.
[0041] 상기에 주목된 바와 같이, 트랙 메뉴 스크린(220)(도 2)은 재생 출력을 생성하는 확장 미디어 파일의 프로세싱을 개시하기 위한 "재생" 버튼(230)을 포함한다. 선택되는 확장 미디어 파일이 레코딩된 사용자 데이터 입력과 같은 첨부된 사용자 입력 스템들 또는 트랙들을 포함하는 경우에, 확장 미디어 파일 애플리케이션은 첨부된 사용자 입력 데이터의 존재를 검출하며, 첨부된 사용자 데이터 입력의 원하는 하나를 선택하기 위해 사용자에 대한 첨부된 트랙 선택 메뉴 스크린을 디스플레이한다.
[0042] 도 4는 디스플레이(102) 상에 첨부된 트랙 선택 메뉴 스크린(402)을 도시한다. 스크린(402)은 선택되는 확장 미디어 파일에 대한 관련으로 저장되는 사용자 입력 스템들 또는 트랙들의 목록(404)을 도시한다. 사용자는 터치스크린 입력 또는 커서 선택에 의해서와 같은, 목록(404)으로부터의 원하는 사용자 입력을 선택함으로써 원래의 레코딩된 앨범 트랙 또는 영화 챕터와 동시적으로 재생을 위해 원하는 사용자 입력 트랙을 선택한다. 디스플레이 스크린(402) 상에서, 사용자 입력 트랙들의 목록 아래에, 도 4는 "로드" 버튼(406), "삭제" 버튼(408) 및 "이름 바꾸기" 버튼(410)을 포함하는 버튼들에 의해 표시된 선택가능한 동작들을 도시한다. 로드 버튼은 사용자가 관련되는 확장 미디어 파일에서 다른 데이터와 동시적으로 선택된 트랙을 경험하도록 재생을 위해 선택된 사용자 입력 트랙을 리트리브한다. 예를 들어, 선택된 사용자 입력이 오디오 트랙인 경우에, 그리고 사용자가 로드 버튼(406)을 통해 사용자 입력을 선택한 경우에, 확장 미디어 파일 애플리케이션은 오리지널 앨범 트랙 또는 영화 챕터의 임의의 오디오 트랙들과 동시적으로 사용자 입력 트랙으로부터 사용자의 오디오 기여를 재생할 것이다. 삭제 버튼(408)은 사용자가 첨부된 사용자 트랙들의 목록(404)으로부터 선택된 사용자 입력 트랙을 삭제하게 허용하며, 이름 바꾸기 버튼(410)은 사용자가 이름 바꾸기 다이얼로그 박스(도시되지 않음)를 통해 선택된 사용자 입력 트랙의 이름을 바꾸도록 허용한다.
[0043] 도 5는 수평으로 배향된 디바이스의 더 긴 측면들(222, 224) 및 수직으로 배향된 더 짧은 측면들(226, 228)을 갖는 랜드스케이프(landscape) 배향으로 디바이스(100)를 도시한다. 디바이스가 랜드스케이프로 배향될 때, 확장 미디어 파일 애플리케이션은 트랙 정보 스크린(502)을 도시하기 위해 디스플레이(102)를 변화시킨다. 확장 미디어 파일 애플리케이션은 디바이스 가속도계 등과 같은 디바이스 자원들을 이용하여 디바이스 배향의 변화를 검출할 수 있다. 트랙 정보 스크린에서, 스크린의 상위 부분은 음색의 피치를 도시하기 위해 고정된 수직 축(504)에 그리고 경과된 시간을 도시하기 위해 스크롤링 수평 축(506)에 악보 정보를 제공한다. 앨범 트랙 또는 영화 챕터의 재생 동안, 수평 축(506) 상의 경과된 시간 값은 시간 제로에서 시작하며 재생의 현재 시간이 수직 축(504)과의 교차에서 대략 나타나도록 경과된 시간을 업데이트하면서, 재생이 계속함에 따라 증가한다. 스크린 디스플레이(502)의 악보 정보 부분에서, 음악 악보 표시자들은 피치 축(504)을 따른 노트 값들에 대응하는 디스플레이(102)의 오른쪽 측면으로부터 나타나며, 음악 악보 표시자들은 재생이 계속함에 따라 오른쪽으로부터 왼쪽으로 디스플레이를 통해 스크롤링한다. 도 5에서, 단지 3개의 예시적인 음악 악보 표시자들(508)이 식별되지만, 도면에서 유사하게 형상화된 수평 바들의 각각은 또한 음악 악보 표시자들임이 이해되어야 한다. 음악 악보 표시자들의 수평 범위는 표시된 피치를 위한 상대적인 노트 지속기간에 대응한다. 만약 있다면, 앨범 트랙 또는 영화 챕터에 대한 가사들이 일반적으로 타원(510)에 의해 표시된 바와 같이 시간 축(506) 아래의 위치에서의 재생 동안 도시된다. 가사들은 대략 경과된 시간에서의 대응하는 발생 아래에서 디스플레이(102)를 걸쳐 스크롤한다.
[0044] 트랙 정보 스크린(502)의 평가 부분에서, 일반적으로 타원(512)에 의해 표시되는, 평가 등급들이 디스플레이된다. 도 5에서, 평가 등급들은 피치 스코어 값, 리듬 스코어 값 및 총 스코어 값을 포함한다. 각각의 스코어 값들은 또한 "따라부르기" 또는 "가라오케" 모드로 지칭되는, 확장 미디어 파일 애플리케이션에 대한 동작의 반주 모드 동안 결정된다. 반주 모드 동안, 디바이스(100)의 프로세서는 앨범 트랙 또는 영화 챕터의 재생 동안 마이크로폰과 같은 오디오 캡처 디바이스로부터의 입력을 모니터하며, 마이크로폰 입력을 확장 미디어 파일의 오리지널 사운드트랙 또는 보컬 트랙에 의해 예시된 바와 같은 대응하는 "타깃" 피치 및 리듬과 비교한다. 이러한 방식으로, 사용자는 연주 트랙이 재생하는 동안 가사들을 마이크로폰으로 노래할 수 있으며, 확장 미디어 파일 애플리케이션은 노래하는 것의 사용자의 보컬 기여가 피치와 리듬의 관점에서 원래의 레코딩에 얼마나 근접한지를 평가할 것이다. 사용자의 보컬 기여는 하부의 원래 레코딩된 프로그래밍의 보컬 스템에 더하여 또는 그 대신에 확장 미디어 파일 애플리케이션의 출력으로서 생성될 수 있다. 평가 등급들은 실시간으로 업데이트될 수 있다. 사용자의 입력의 파라미터들은 확장 미디어 파일 애플리케이션의 구성에 따라, 피치 및 리듬에 더하여 또는 그 대신에 평가될 수 있다.
[0045] 상술한 확장 피처들의 동작은 본원에 개시된 확장 미디어 파일 애플리케이션에 의한 선택된 파일의 재생 및 확장 미디어 파일의 선택에 의해 개시된다. 상기에 주목된 바와 같이, 본원에 개시된 바와 같은 확장 미디어 파일은 종래의 파일 포맷을 표시하는 파일 접미사를 가지며, 멀티미디어 트랙들이 생성된 파일 포맷을 반영한다. 본원에 설명된 예시적인 파일들은 "m4a" 접미사를 갖는다. 접미사(예를 들어, m4a)의 종래의 미디어 파일들을 프로세싱할 수 있는 종래의 플레이어는 또한 본원에 개시된 확장 피처들을 생성하지 않을지라도, 확장 미디어 파일을 프로세싱할 수 있다. 확장 미디어 파일로부터의 확장 피처들로의 액세스를 획득하고 재생성하기 위해, 본원에 개시되는 확장 미디어 파일 애플리케이션을 이용할 필요가 있다. 따라서, 확장 미디어 파일 애플리케이션은 확장 미디어 파일의 선택을 위한 사용자 인터페이스를 제공한다.
[0046] 도 6은 또한 홈 스크린 디스플레이로 지칭되는 트랙 선택 스크린(602)을 도시하는 디스플레이(102)를 갖는 포트레이트 배향에서의 디바이스(100)를 도시한다. 트랙 선택 스크린(602)은 디바이스(100) 및 확장 미디어 파일 애플리케이션에 이용 가능한 미디어 파일들의 목록을 제공한다. 확장 미디어 파일 애플리케이션이 런칭될 때, 확장 미디어 파일들을 위치시키고 식별하기 위해 이용 가능한 파일들의 탐색을 자동으로 수행한다. 스캔의 범위는 하드 드라이브 또는 메모리, 또는 부착된 디바이스 또는 실장된 드라이브와 같은 디바이스의 저장 디스크 또는 저장 영역을 커버할 수 있다. 이용 가능한 확장 미디어 파일들이 위치되며 식별될 때, 애플리케이션은 도 6의 트랙 선택 스크린을 도시한다.
[0047] 도 6의 트랙 선택 스크린(602)은 확장 미디어 파일 애플리케이션에 의해 프로세싱될 수 있는 이용 가능한 앨범 트랙들 또는 영화 챕터들의 목록(604)을 도시한다. 목록(604)은 확장 미디어 애플리케이션에 의해 프로세싱될 수 있는 파일 명칭 접미사를 갖는 파일들을 포함한다. 목록은 재생을 위한 종래의 미디어 파일들 및 또한 재생을 위해 이용 가능한 확장 미디어 파일들을 포함할 수 있다. 예를 들어, 목록(604)은 종래의 미디어 파일들로부터 구별하기 위해 도 6에서 "#"으로 도시하는, 특별한 심벌로 지정된 확장 미디어 파일들을 도시한다. 종래의 미디어 파일들과 확장 미디어 파일들 사이를 구별하기 위해 다른 심벌들 또는 지시들이 이용될 수 있다. 도 6은 아티스트명 및 곡명의 순서로 배열된 앨범 트랙들을 도시하지만, 당업자는 트랙들이 식별될 수 있는 적합한 대안적이며 보충적인 특성들을 알 것이다. 목록이 단일 디스플레이 스크린상에 맞출 더 많은 트랙들을 포함하는 경우에, 추가적인 트랙들을 위한 정보는 디바이스(100)의 커서 키들 또는 사용자 인터페이스의 스크롤 바(606)를 이용하여 목록(604)을 무빙 업 및 다운함으로써 보여질 수 있다.
[0048] 상기에 개시된 확장 피처들은 확장 피처들이 확장 미디어 파일 애플리케이션에 의해 생성되는 확장 미디어 파일들에 의해 가능해진다. 그와 같은 확장 미디어 파일들은 앨범 또는 영화를 포함하는 그룹 작품의 오디오 및 비디오 트랙들을 포함하는 오디오 파일들 및 비디오(그래픽들) 파일들을 이용하는 생성 프로세스를 통해 생산된다. 확장 미디어 파일은 예를 들어, 레코딩된 사용자 입력, 실시간 보컬 이펙트들 및 가라오케 입력 및 평가를 포함하는, 본원에 개시된 것들과 같은 확장 피처들로 보충된, 종래의 오디오 또는 비디오(멀티미디어) 작품의 챕터들 또는 트랙들을 포함하는 앨범 트랙들 또는 영화 챕터들을 포함할 수 있다. 즉, 종래의 오디오 또는 비디오 작품은 별도로 이용 가능한 상업적으로 이용 가능한 레코딩일 수 있는 한편, 본 개시는 상업적으로 이용 가능한 레코딩 상에 이용 가능한 모든 재료를 가지며, 또한 본원에 개시된 확장 피처들을 갖는, 상업적으로 이용 가능한 레코딩의 확장 버전을 설명한다.
[0049] 도 7은 본원에 개시된 바와 같은 확장 사용자 피처들로 확장 미디어 파일(702)을 생성하기 위한 트랙 생성 프로세스(700)를 예시한다. 도 7은 예시적인 확장 미디어 파일의 다양한 컴포넌트들(이하에 주목된 바와 같이, 일부 임의선택적임)을 도시한다. 도 7에서, 확장 미디어 파일(702)의 오디오 데이터 부분들만이 설명될 것이다. 그러나 확장 미디어 파일(702)은 포함된 데이터 타입들 중 하나 또는 둘 이상의 하나 또는 둘 이상의 파일들과 조합하여 또는 단일로, 오디오, 비디오, 그래픽 및 다른 데이터 타입들과 같은 데이터 타입들을 포함할 수 있다. 예를 들어, 확장 미디어 파일(702)은 오디오 데이터 및 비디오 데이터 둘 다를 포함할 수 있다.
[0050] 도 7에 예시된 확장 미디어 파일(702)은 오디오 트랙들 또는 스템들을 정의하는 다수의 파일들(704)로부터 생성되는 앨범 트랙을 포함한다. 종래의 오디오 파일에 대해, 마스터 m4a 스테레오 파일이 생성될 수 있는 소스 오디오 파일들로부터 2-채널 왼쪽 및 오른쪽 트랙(L/R 스테레오) 파일(706)이 생성된다. 이러한 m4a 스테레오 마스터는 CD, DVD, BD 레코딩들 또는 비닐 레코드들과 같은 물리적 매체 상에 레코딩된 프로그래밍, 또는 USA 워싱턴 시애틀의 Amazon.com사의 웹 사이트 또는 애플사의 "아이튠즈 뮤직 스토어(iTunes Music Store)"와 같은 온라인 소매 판매들을 통해 이용 가능한 전자 포맷 프로그래밍을 위해서와 같은, 청취자들에게 상업적으로 이용 가능한 종래의 스테레오 음악 파일이다.
[0051] 이용되는 파일 포맷에 따른 다양한 채널 레이아웃들을 이용하는 임의의 수의 트랙들(704)은 스테레오 마스터(708)로 인코딩될 수 있다. m4a 파일 포맷에서, 애플사로부터 이용 가능한 채널 레이아웃들이 정의된다. 이들 채널 레이아웃들은 표준 오디오 채널 구성들, 멀티채널 조인트-서라운드(joint-surround) 인코딩들 및 시퀀셜 인코딩들을 포함한다. 인코딩되는 트랙들은 사용자에 의해, 또는 레코딩 아티스트들, 미디어 배포자들, 레코드 라벨들, 스폰서들 등에 의해 제공될 수 있다. 대부분의 레코딩된 작품들은 보컬 및 뮤직(연주) 트랙들과 같은 다수의 트랙들로부터 소싱(sourced)된다. 다수의 트랙들은 마스터링 프로세스 동안 믹스 다운되며 전형적으로 최종 2-트랙(스테레오) 작품이 생성된다. 파일 포맷에 따른 최종 작품은 때때로 다수의 트랙들로부터 재생 애플리케이션에 의해 청취자로의 프레젠테이션을 위해 2-채널(스테레오) 형태로 자동으로 믹싱 다운되는 다수의 트랙들을 갖는다. 예를 들어, 애플사로부터의 이동 디바이스들을 위한 "iOS" 플랫폼 운영 시스템은 현재 개별 트랙들에 대한 직접 액세스를 허용하지 않지만, 오히려 믹스-다운된 스테레오 샘플들을 이용한다. 따라서, 본원에 설명된 시도에서 쓸모없는 것으로서 m4a 파일들에 이용 가능한 다양한 채널 레이아웃들을 렌더링한다. 결과적으로, 종래의 마스터 스테레오 트랙들은 종래의 미디어 파일을 위한 종래의 플레이어 애플리케이션에 의해 예상되는 바와 같이 확장 미디어 파일(702)에서 전형적인 포지션에 배치된다. m4a 메타데이터 태그들(703)과 같은 추가적인 정보는 또한 종래의 플레이어 애플리케이션에 의해 예상되는 바와 같이 확장 미디어 파일에서 그들의 전형적인 포지션에 배치된다. 이러한 배치는 종래의 재생 디바이스들과 확장 미디어 파일(702)의 역방향 호환성을 지원한다.
[0052] 도 7은 확장 미디어 파일(702)이 종래의 앨범 트랙을 생성하기 위해 이용되는 오디오 파일들(704), 2-채널 L/R 데이터 파일(706) 및 마스터 m4a 파일(708)의 수집으로 시작하여 생성되는 것을 도시한다. 주목된 바와 같이, 마스터 m4a 파일의 트랙들은 대응하는 종래의 상업적으로 이용 가능한 앨범 트랙에서 그들의 전형적인 포지션에 대응하는 위치들에서 확장 미디어 파일(702)에 배치된다.
[0053] 본원에 개시된 확장 피처들을 제공하는 추가적인 멀티미디어 트랙들 및 피처 데이터의 전부는 m4a 확장 미디어 파일(702)의 사용자-데이터 섹션에 첨부된다. 확장 피처들에 대한 추가적인 데이터 때문에, 확장 미디어 파일은 그렇지 않으면 종래의 파일(708)의 데이터에 대해 필요한 것보다 더 큰 파일이다. 그러나 증가된 파일 크기는 확장 피처들을 제공하기 위해 필요하며, 추가적인 데이터는 디바이스에 의한 프로세싱을 위해 임의의 상당한 문제점 또는 어려움을 생성하는 크기는 아니다. 본원에 설명된 바와 같은 확장 피처들이 또한 노래들 및 영화 챕터들의 개별 트랙들에 대한 완전한 액세스를 허가하는 운영 시스템으로도 설명된 바와 같이 발생될 수 있음이 주목되어야 한다.
[0054] m4a 파일 포맷에 관한 추가적인 정보를 제공하기 위해, m4a 파일은 "박스들"로 칭해지거나 이전에 원자들로 칭해진 정보의 섹션들로 이루어진다. 당업자는 서로 다른 목적들을 위해 이용되는 다양한 박스들의 전체 호스트가 존재함을 인식할 것이다. 예를 들어, 사용자-정의된 데이터를 갖는 정보의 섹션은 지시자 "udta"를 갖는 박스이다. udta 박스 내에 발견된 것은 "uuid" 지시자를 갖는 사용자-확장 박스이다. uuid 박스에서의 데이터는 길이 값 다음에 "uuid" 지시자를 갖도록 요구된다. 추가적인 지시자들은 명백하게 정의되지 않을 수 있다. 예를 들어, 상기에 언급된 "atomicparsely" 툴은 고유한 16-바이트 유니버설 id(유감스럽게도 또한 uuid로 지칭됨)가 생성되는 4-바이트 지시자를 포함하는 데이터를 요구하며, 그 후에 원래의 4-바이트 지시자가 후속되고 더 포맷하며, 그 후에 실제 데이터 페이로드가 후속된다. 본원에 설명된 기술에 대해, 4-바이트 지시자 "maap"는 임의로 채택되었다. 당업자는 요망되는 대로, 다른 지시자들이 선택될 수 있음을 이해할 것이다. 즉, 지시자의 선택은 파일 개발자 및 애플리케이션 개발자의 재량에 있다. "atomicparsely" 툴은 uuid 박스 페이로드의 "암호화" 또는 "포맷화을 위한 정보의 다음 20 바이트들을 이용한다. 즉, 툴은 m4a 파일에 첨부되는 데이터의 사용자 데이터에 액세스한다. uuid 박스들은 4-문자 식별 코드 "uuid"로 마킹된다. 확장 미디어 파일 애플리케이션에 의한 프로세싱 동안 탐색되는 데이터의 제 1 청크(chunk)는 내부적으로-이용되는 4-문자 코드 "maap"가 후속되는 적절하게 생성된 16-바이트 uuid이다.
[0055] m4a 파일 포맷은 사용자-공급된 데이터를 위해 포함될 수 있는 섹션을 특정한다. 이러한 사용자-공급된 데이터 섹션은 4-문자 식별 코드로 마킹되는 uuid 박스들로 칭해지는 더 작은 서브섹션들을 가질 수 있다. 상술한 바와 같이, 예를 들어, 현재의 사용자 피처들은 (MuseAmi 오디오 프로세싱에 대해, 여기서 MuseAmi사는 본 발명의 양수인임) "maap"의 uuid로 표시된 m4a 파일 서브섹션에 포함될 수 있다. uuid 박스들 및 사용자 데이터 섹션의 일부 예상된 포맷화이 요구되는 한편(상기 언급된 id 코드), 콘텐츠는 임의의 특정 방식으로 포맷화되도록 요구되지 않는다. 이는 m4a 접미사로 식별된, 확장 미디어 파일 내에 마스터 2-채널 m4a 오디오 트랙의 종래의 오디오 재생과 간섭하지 않는 추가적인 데이터를 운반하기 위해 효율적으로 개방 채널을 제공한다. 즉, 확장 미디어 파일 노래의 마스터 오디오 트랙들은 아티스트, 노래 타이틀, 앨범 타이틀 및 앨범 아트워크와 같은 정보를 위한 적절한 m4a 태그들을 갖는 m4a 파일로 인코딩된다. 이러한 마스터 m4a 파일은 확장 피처들에 대한 데이터를 포함하는, 모든 다른 사용자 공급된 데이터에 대한 컨테이너로서 서빙한다.
[0056] 재생을 위한 미디어를 포함하는 다른 파일 포맷들은 본원에 설명된 확장 피처들에 대한 데이터를 포함하기 위해 이용될 수 있는 사용자 데이터에 대해 대응하는 파일 서브섹션들을 갖는 경향이 있음이 이해되어야 한다. 그와 같은 파일 서브섹션 구성들은 본원에 설명된 동일한 기술들을 이용하여 그와 같은 다른 파일 포맷들에서 확장 미디어 파일들의 생성을 허용하며, 다른 파일 포맷들에서의 그와 같은 확장 미디어 파일들은 또한 각각의 파일 타입들에 대해 종래의 플레이어들과 역방향-호환가능할 것이다. 예를 들어, 사용자 라이브러리들로 조직화되도록 의도되는 파일 포맷들은 본 기술이 본원에 설명된 확장 피처들에 대한 데이터를 저장하기 위해 이용할 수 있는, 라이브러리 정보 등을 저장하기 위해 적합한 사용자 데이터 섹션들을 가질 수 있다. 또한, 사용자가 확장 미디어 파일에 그들 소유의 메타데이터를 저장하는 것이 가능하다. 예를 들어, 사용자는 구성 또는 자동화 데이터를 포함하여, 멀티-트랙 파일을 구매할 수 있으며 그들 소유의 고유한 사운드를 생성할 수 있다. 사용자는 오리지널 아티스트의 버전과 함께 동일한 파일에 그들 소유의 해석을 저장할 수 있다.
[0057] 추가적인 보컬(710) 및 음악(즉, 연주)(712) 트랙들은 대응하는 각각의 보컬 m4a 트랙들(714) 및 음악(즉, 연주) m4a 트랙들(716)을 생성하기 위해 이용될 수 있다. 이들 보컬(714) 및 연주(716) 트랙들은 확장 피처들을 갖는 2차 트랙들을 포함하며, 멀티미디어 트랙들 또는 스템들의 임의의 수 또는 조합일 수 있다. 확장 사용자 피처들을 지원하기 위해 그리고 역방향 호환성과 관련하여, 스테레오 오디오 트랙들의 2개의 세트들은 확장 미디어 파일(702)에 이용된다: 예를 들어, 연주곡 및 리드 보컬들. 이들 2차 트랙들의 각각은 표준 아이튠즈 m4a 컨테이너 파일들을 이용하여 이진 파일들로 인코딩된다. 양쪽 이진 파일들은 마스터 m4a 확장 미디어 파일(702)의 사용자 데이터 섹션으로 주입된다. MuseAmi사로부터 이용 가능한 독점적인 오디오 프로세싱 피처들 및 강화된 경험을 위한 관련된 이펙트들 모듈들이 이용된다. 구성 파일들(718) 및, 적절한 경우에, 자동화 파일들(720)은 확장 미디어 파일의 특정 오디오 트랙들 레이아웃, 뮤직 스타일 및 엔터테인먼트 목표들에 대해 맞춤 된다.
[0058] 구성 파일들(718)은 오디오 프로세싱 및 비디오 프로세싱을 포함하는 복합 미디어 프로세싱의 지원 및 사양을 위한 단일 전체 데이터 구성 및 구조를 제공한다. 구성 파일은 (샘플 레이트 및 다른 시스템 자원 파라미터들과 같은) 시스템-와이드 특성들을 제어하는 섹션들을 포함하며, 또한 사용중인 모든 프로세싱 컴포넌트들 및 모듈들을 정렬하는 섹션들, 채널 구성들의 레이아웃, 버퍼링 요건들, 신호 체인을 생성하기 위한 프로세싱 모듈들 및 컴포넌트들의 접속들, 임의의 모듈 파라미터들의 세팅들, 자동화 파일들의 포함, 분석에 대한 접속 포인트들뿐 아니라, 커스텀 제어 포인트들을 포함한다. 자동화 파일들(720)은 특정된 천이 곡선, 예를 들어, 계단식, 선형, 포물선 등을 갖는 정해진 시간 프레임을 통해 임의의 수의 소프트웨어 컴포넌트들 및 프로세싱 모듈들에 대한 파라미터들의 임의의 세트를 조정하기 위한 메커니즘을 제공한다.
[0059] 구성 및/또는 자동화 파일들(718, 720)의 각각은 마스터 m4a 확장 미디어 파일(702)의 사용자 데이터 섹션으로 순차적으로 주입된다. 예를 들어, 상술한 "atomicparsely"와 같은 메타데이터 편집기는 파일들을 m4a 파일(702)의 사용자 데이터 섹션으로 주입하거나 삽입하기 위해 이용될 수 있다. MIDI 파일(722)에서의 악보 정보 및 텍스트 파일(724)에서의 가사/타이밍 정보와 같은 추가적인 게임-관련된 지원 파일들은 또한 확장 미디어 파일(702)의 콘텐츠 제공자 데이터 영역에 임의선택적으로 주입될 수 있다. 확장 미디어 파일로의 콘텐츠 제공자 데이터의 추가 또는 삽입은 메타데이터 편집기로 달성될 수 있다. m4a 파일의 uuid = "maap" 콘텐츠 제공자 데이터 섹션으로의 확장 피처들 파일의 그리고 그와 같은 2차 트랙들의 추가는 확장 미디어 파일(702)로 유도하는 데이터 화살표들 주변의 타원에 의해 도 7에 표시된다.
[0060] 확장 미디어 파일에서의 오디오 정보 및 비디오 정보의 종래의 재생은 애플사로부터 이용 가능한 "아이튠즈" 플레이어 애플리케이션뿐 아니라 다른 종래의 미디어 플레이어들과 같은 종래의 재생 애플리케이션들을 통한 재생을 위해 이용 가능하다. 확장 미디어 파일 아래의 기본 파일은 인식된 파일 접미사(즉, m4a)를 갖는 종래의 아이튠즈 m4a 파일이기 때문에, 확장 미디어 파일은 완전하게 수용될 것이며 사용자의 아이튠즈 뮤직 라이브러리에 통합될 것이다. 뮤직 라이브러리는 애플사로부터의 임의의 "맥(Mac)" 컴퓨터, "아이팟(iPod)" 플레이어, "아이폰(iPhone)" 이동 전화 또는 "아이패드(iPad)" 태블릿 컴퓨터상에 설치된 종래의 "아이튠즈" 플레이어를 통해 액세스 가능할 것이다. 더욱이, 뮤직 라이브러리는 "윈도우즈"를 위한 "아이튠즈" 플레이어 애플리케이션이 설치된 USA 워싱턴 레드몬드의 마이크로소프트사로부터의 "윈도우즈" 운영 시스템을 갖는 디바이스와 같은 임의의 컴퓨터 디바이스에 액세스 가능할 것이다. 뮤직 라이브러리는 대안적으로 사용자 디바이스의 호스트 운영 시스템에 의해 지원되는 다른 설치된 제 3-파티 미디어 파일 플레이어들에 이용 가능할 수 있다. 사용자들은 이용 가능한 트랙들을 분류하고, 재생목록들에 트랙들을 포함하거나, 간단하게 그들의 요청시에 트랙들을 되돌려 재생하기 위해 플레이어 애플리케이션 또는 다른 파일 익스플로러 애플리케이션을 이용할 수 있다. 당업자에게 알려지는 바와 같이, m4a 파일들의 유사한 피처들 및 능력들 및 크로스-플랫폼(cross-platform) 호환성이 대안적인 파일 포맷들 및 재생 애플리케이션들에 제공될 수 있다.
[0061] 추가로, 본 개시에 따른 적합하게 구성되는 확장 미디어 파일 애플리케이션은 "아이튠즈" 라이브러리 또는 다른 사용자 뮤직 라이브러리와 인터페이스하며, 이용 가능한 오디오 파일들에 관한 동일한 기본 정보를 리턴하며 임의의 오디오 트랙이 디바이스 상에 설치된 표준 "아이튠즈" 뮤직 플레이어 애플리케이션 또는 다른 뮤직 플레이어 애플리케이션을 통해 쉽게 재생되게 요청한다. 본원에 설명된 기술들은 이동 플랫폼들 및 테이블 컴퓨터 디바이스들을 위한, 그리고 더 복잡한 컴퓨터 디바이스들을 위한 재생 애플리케이션 및 다른 운영 시스템들에 유사하게 적용될 수 있다. 적합하게 구성된 종래의 재생 애플리케이션이 실행하는 운영 시스템들은 예를 들어, 구글사로부터의 "안드로이드" 운영 시스템 및 이동 및 테이블 디바이스들을 위한 마이크로소프트사로부터의 "윈도우즈 폰 7" 운영 시스템뿐 아니라, 애플사로부터의 "Mac OS X" 및 마이크로소프트사로부터의 "윈도우즈"를 포함할 수 있다. 대응하는 적합하게 구성된 재생 애플리케이션들이 각각의 운영 시스템들을 위해 제공될 수 있다.
[0062] 상기에 주목된 바와 같이, 본원에 개시된 확장 미디어 파일은 종래의 미디어 플레이어들과 역방향-호환가능하며, 그 피처는 확장 미디어 파일에 의해 이용되는 종래의 파일 명칭 접미사(즉, m4a)에 의해 강조된다. 추가로, 확장 미디어 파일 애플리케이션은 레코딩된 프로그래밍으로 종래의 파일들 및 확장 미디어 파일들 둘 다를 프로세싱할 수 있다. 도면들은 이러한 유연성을 예시한다. 도 8은 종래의 미디어 플레이어를 이용하는 확장 미디어의 재생을 도시하며, 도 9는 확장 미디어 파일 애플리케이션으로의 확장 미디어 파일의 재생을 도시하며, 도 10은 확장 미디어 파일 애플리케이션으로의 확장 미디어 파일의 프로세싱을 도시한다.
[0063] 도 8은 종래의 미디어 플레이어(806)에 의해 미디어 파일 라이브러리 수집(804)으로부터 확장 미디어 파일(802)의 재생을 예시하는 블록도이다. 상기에 주목된 바와 같이, 확장 미디어 파일(802)이 종래의 미디어 플레이어(806)에 제공될 때, 플레이어는 플레이어가 인식하는 데이터 포맷들에 따라, 오디오 및 비디오 트랙들과 같은 미디어 트랙들을 포함하는 데이터를 자동으로 추출할 것이다. 그와 같은 인식된 데이터 포맷들은 전형적으로 예를 들어, 인식된 파일 명칭 접미사와 관련된 파일 포맷들을 포함할 수 있다. 추출된 데이터는 확장 미디어 파일의 종래의 레코딩된 프로그래밍 부분들을 위한 데이터, 콘텐츠 제공자의 콘텐츠 데이터 및 아티스트 정보, 타이틀 정보, 뮤직 장르, 앨범 아트워크, 가사 등과 같은 데이터를 포함할 것이다. 그와 같은 추출된 데이터는 콘텐츠 제공자 데이터 박스(808)에 의해 도 8에 나타난다. 확장 미디어 파일(802)의 종래의 레코딩된 프로그래밍을 위한 추출된 데이터는 재생 자원들(810)을 통한 재생을 위한 종래의 미디어 플레이어(806)에 의해 프로세싱되어, 오디오 및/또는 비디오 출력을 발생시킨다. 상기에 주목된 바와 같이, 재생 자원들은 호스트 디바이스의 운영 시스템을 통해 액세스된 바와 같은 호스트 디바이스의 시스템 자원들뿐 아니라, 미디어 플레이어의 임의의 자원들을 포함할 수 있다.
[0064] 도 9는 확장 미디어 파일 애플리케이션(906)에 의해 미디어 파일 라이브러리 컬렉션(904)으로부터 종래의 미디어 파일(902)의 재생을 예시하는 블록도이다. 종래의 레코딩된 프로그래밍 미디어 파일(902)이 확장 미디어 파일 애플리케이션(906)에 제공될 때, 애플리케이션은 애플리케이션이 인식하는 데이터 포맷들에 따라, 오디오 및 비디오 트랙들과 같은, 미디어 트랙들을 포함하는 데이터를 자동으로 추출할 것이다. 그와 같은 인식된 데이터 포맷들은 전형적으로 예를 들어, 인식된 파일 명칭 접미사와 관련된 파일 포맷들을 포함할 수 있다. 이제까지 설명된 예에서, "m4a" 접미사가 이용된다. 상기에 주목된 바와 같이, 애플리케이션(906)은 다른 파일 명칭 접미사들을 인식하도록 구성될 수 있다. 추출된 데이터는 종래의 미디어 파일 또는 트랙의 오디오 및 비디오 스템들과 같은 종래의 레코딩된 프로그래밍을 위한 데이터를 포함할 것이다. 추출된 데이터는 또한 아티스트 정보, 타이틀 정보, 뮤직 장르, 앨범 아트워크, 가사 등과 같은 콘텐츠 제공자의 콘텐츠 데이터를 포함할 것이다. 그와 같은 추출된 데이터는 콘텐츠 제공자 데이터 박스(908)에 의해 도 9에 표현된다. 종래의 미디어 파일(902)의 종래의 레코딩된 프로그래밍을 위한 추출된 데이터가 재생 자원들(910)을 통한 재생을 위한 확장 미디어 파일 애플리케이션(906)에 의해 프로세싱되어, 오디오 및/또는 비디오 출력을 발생시킨다. 상기에 주목된 바와 같이, 재생 자원들은 호스트 디바이스의 운영 시스템을 통해 액세스된 바와 같은 호스트 디바이스의 시스템 자원들뿐 아니라, 호스트 디바이스를 통해 이용 가능한 임의의 다른 자원들 및 확장 미디어 파일 애플리케이션의 임의의 자원들을 포함할 수 있다.
[0065] 도 10은 확장 미디어 파일 애플리케이션(1006)에 의해 미디어 파일 컬렉션(1004)으로부터 확장 미디어 파일(1002)의 프로세싱을 예시하는 블록도이다. 확장 미디어 파일(1002)이 확장 미디어 파일 애플리케이션(1006)에 제공될 때, 애플리케이션은 애플리케이션이 인식하는 데이터 포맷들에 따라, 오디오 및 비디오 스템들과 같은 미디어 트랙들을 포함하는 데이터를 자동으로 추출할 것이다. 그와 같은 인식된 데이터 포맷들은 전형적으로 예를 들어, 인식된 파일 명칭 접미사와 관련된 파일 포맷들을 포함할 수 있다. 이제까지 설명된 예에서, "m4a" 접미사가 이용된다. 상기에 주목된 바와 같이, 확장 미디어 파일 애플리케이션(1006)은 다른 파일 명칭 접미사들을 인식하도록 구성될 수 있다. 추출된 데이터는 종래의 미디어 파일 또는 트랙의 오디오 및 비디오 스템들과 같은 종래의 레코딩된 프로그래밍을 위한 데이터를 포함할 것이다. 추출된 데이터는 또한 아티스트 정보, 타이틀 정보, 뮤직 장르, 앨범 아트워크, 가사 등과 같은 콘텐츠 제공자의 콘텐츠 데이터를 포함할 것이다. 그와 같은 추출된 데이터는 콘텐츠 제공자 데이터 박스(1008)에 의해 도 10에서 표현된다. 추출된 데이터는 또한 (종래의 레코딩된 프로그래밍에 의해 제공되지 않거나 종래의 레코딩된 프로그래밍에 의해 제공된 것들과 다른 범위까지) 보컬 및 오디오 스템들, 구성 파일 및 자동화 파일 데이터, MIDI 정보, 트랙 정보 스크린(도 5)을 위한 피치 및 타이밍 정보, 및 확장 미디어 파일에 의해 지원되는 다른 확장 피처들과 같은 확장 피처들에 대한 데이터를 포함할 것이다. 도 5의 트랙 정보 스크린(502)의 피치 정보 및 타이밍 정보는 도시된 음악 악보 표시자들(508) 및 가사(510)가 대응하는 앨범 트랙 또는 영화 챕터의 경과된 시간에 관하여 적절한 위치에 나타나도록 보장하기 위해 이용된다. 확장 피처들에 대한 추출된 데이터는 도 10에서 확장 피처들에 대한 데이터 박스(1010)로 표현된다.
[0066] 상기에 주목된 바와 같이, 확장 미디어 파일 애플리케이션은 확장 미디어 파일을 갖는 사용자 데이터 입력을 저장하는 것을 지원한다. 사용자 데이터 입력은 예를 들어, 트랙 메뉴 스크린(도 2)을 통해 입력된 세팅들을 포함할 수 있다. 따라서, 사용자 데이터 입력은 확장 미디어 파일(1002)로부터 판독되고 파일에 기록된다. 그와 같은 사용자 데이터 입력은 사용자 데이터 입력 박스(1012)에 의해 도 10에 나타난다. 확장 미디어 파일로부터의 추출된 데이터는 재생 자원들(1014)을 통한 재생을 위해 확장 미디어 파일 애플리케이션(1006)에 의해 프로세싱되어, 오디오 및/또는 비디오 출력을 발생시킨다. 상기에 주목된 바와 같이, 재생 자원들은 호스트 디바이스의 운영 시스템을 통해 액세스된 바와 같은 호스트 디바이스의 시스템 자원들뿐 아니라, 호스트 디바이스를 통해 이용 가능한 임의의 다른 자원들 및 확장 미디어 파일 애플리케이션의 임의의 자원들을 포함할 수 있다.
[0067] 도 10의 예시적인 시스템에 대해, 콘텐츠 제공자 정보와 같은 임의의 앨범 트랙에 관하여 일반적으로 이용 가능한 표준 정보에 더하여, 뮤직 라이브러리(1004)는 뮤직 라이브러리로부터의 임의의 요청된 앨범 트랙으로부터의 메타데이터를 적합하게 구성된 확장 미디어 파일 애플리케이션(1006)과 같은 애플리케이션에 제공할 수 있다. 애플리케이션은 그 후에, 노래 타이틀, 아티스트 등과 같은 표준 정보에 더하여 임의의 사용자-공급된 데이터를 위한 메타데이터를 검사할 수 있다. 사용자 공급된 데이터의 검사는 확장 미디어 파일 애플리케이션(1006) 내의 사용자 데이터 입력 박스(1012)에 의해 도 10에 표시된다. 본원에 설명된 예시적인 m4a 시스템에 대해, 상기에 주목된 바와 같이, 사용자-공급된 데이터는 확장 피처들을 제공하기 위해 선택된 ID 표시자 "maap"로 마킹되는 uuid 박스들을 제공한다. uuid 박스들의 콘텐츠들은 그 후에 트랙 콘텐츠에 관한 설명적 정보뿐 아니라 확장 피처들에 대해 공급된 임의의 이진 데이터를 추출하기 위해 확장 미디어 파일 애플리케이션에 의해 액세스될 수 있다. 본원의 설명에 따르면, uuid 박스들에서의 데이터 페이로드는 이전에 설명된 확장 피처들에 관한 추가적인 정보를 운반하기 위해 이용된다. 첨부되는 확장 피처 데이터는 확장 미디어 파일 애플리케이션(1006)에 의해 자동으로 검출되고 추출되며, 게임 엔터테인먼트 또는 상호 작용 청취를 위해서와 같은, 확장 피처 프로세싱으로 이용되도록 일시적 파일들에 놓인다.
[0068] 사용자-공급된 데이터가 그와 같이 마킹되기 때문에, 확장 미디어 파일 애플리케이션(1006)은 사용자에게 그 존재에 대해 경보를 울리며 뮤직 콘텐츠와의 부가-가치 상호 작용을 제공한다. 이는 예를 들어, 상업적 트랙들의 리믹싱(remixing), 일부 또는 모든 트랙들에 대해 추가된 오디오 이펙트들, 마이크로폰 또는 신시사이징된 오디오에 의해 사용자 공급된 음악에 적용된 오디오 이펙트들 또는 가라오케와 같은 게임 콘텍스트들과 같은 시나리오들을 포함할 수 있다. 예를 들어, 공급된 오디오에 대한 일부 리믹싱 및 레벨 제어들은 확장 피처들뿐 아니라 사용자에 대한 음성 강화들로서 지원될 수 있다. 이들 추가적인 제어들은 확장 피처들 재생 애플리케이션이 그들의 존재를 결정한 후에 사용자에게 노출된다. 더욱이, 제 2 스크린이 생성될 수 있으며 추가적인 오디오 및 확장 피처들 파일들과 함께 포함되는 가라오케 게임 콘텍스트를 위해 이용 가능해진다. 이러한 제 2 스크린은 애플리케이션이 임의선택적으로 마스터 "아이튠즈" m4a 파일에 포함되는 것으로 결정할 때 이용 가능해진다.
[0069] 상기에 주목된 바와 같이, 확장 피처들은 예를 들어, 확장 미디어 파일로부터 보컬들만 또는 연주들만의 선택을 포함할 수 있거나, 확장 피처들은 사용자의 음성을 레코딩에 더빙하거나 레코딩된 보컬들을 사용자의 보컬들로 교체하는 가라오케 기능들을 포함할 수 있거나, 확장 미디어 파일의 채널들 및 트랙들에 통합되는 게임 애플리케이션들을 포함할 수 있는 등이다. 다른 피처들 및 콘텐츠가 추가될 수 있다. 예를 들어, 추가적인 콘텐츠는 본 발명의 양수인인 MuseAmi사로부터 이용 가능한 바와 같은 콜라보레이티브(collaborative) 뮤직 툴들을 이용하여 생성될 수 있다. 그와 같은 콜라보레이티브 툴들을 이용하면, 사용자는 m4a 파일에 대해 이전에 주목된 "maap" 파일과 같은, 상술한 확장 피처 데이터와의 참여적인 상호 작용을 통해 콘텐츠를 초기에 생성할 수 있으며, 그 후에 사용자는 생성된 콘텐츠를 적절한 포털(또는 배포 및 콜라보레이션의 다른 수단)에 제공할 수 있으며, 그때 추가적인 사용자들은 제 1 사용자에 의해 발생되는 콘텐츠에 더 추가할 수 있거나 그 콘텐츠와 콜라보레이트할 수 있다. 이러한 프로세스는 연속적일 수 있으며 추가적인 사용자들로 반복할 수 있다.
[0070] 도 11은 재생 동안 확장 미디어 파일의 프로세싱을 예시하며 확장 미디어 파일의 재생 동안 이용 가능한 확장 사용자 피처들을 도시한다. 디코더(1102)는 입력으로서 확장 미디어 파일을 수신하는 확장 미디어 파일 애플리케이션(1006)(도 10)의 컴포넌트이며, 또한 저장된 미디어 이펙트들 파일을 수신할 수 있으며, 저장된 사용자 데이터 입력 파일을 수신할 수 있으며, 마이크로폰 입력 또는 제어 세팅들과 같은 실시간 상호 작용 사용자 기여를 수신할 수 있다. 디코더(1102)는 사용자가 확장 미디어 파일에서 피처 데이터에 대한 액세스를 획득하는 수단이다. 디코더는 디코더의 실행이 자동적이며 사용자에게 투명하도록, 확장 미디어 파일 애플리케이션의 실행으로 집적될 수 있다. 예를 들어, 도 7을 참조하면, 디코더는 확장 미디어 파일의 보컬 스템들(714) 및 연주 스템들(716)을 판독하거나 디코딩할 것이며, 확장 미디어 파일의 추가적인 메타데이터(718, 720, 722, 724)를 프로세싱할 뿐 아니라, 피처 데이터를 포함하여, 실시간 사용자 데이터 입력 및 제어 세팅들을 프로세싱할 것이다.
[0071] 피처 데이터에 의해 제공되는 확장 사용자 피처들은 재생 디바이스의 이동 및 배향에 응답적일 수 있다. 예를 들어, 도 11에 표시된 바와 같이, 디바이스가 포트레이트 뷰로 유지될 때 사용자 인터페이스 엘리먼트들과 같은 피처들(1104)의 일 세트가 제공될 수 있으며, 디바이스가 랜드스케이프 뷰로 유지될 때 애플리케이션 내 뷰잉 또는 게임과 같은 피처들(1106)의 다른 세트가 제공될 수 있다. 오디오 프로세싱 블록(1108)은 콘텐츠 제공자 블록(1008), 확장 피처들에 대한 데이터 블록(1010) 및 사용자 데이터 입력(1012)에 의해 표시되는 도 10에 예시된 프로세싱을 포함한다. 오디오 프로세싱 블록은 호스트 디바이스의 운영 시스템을 통해 액세스되는, 호스트 디바이스의 자원들 및 확장 미디어 파일 애플리케이션(804) 둘 다에 의한 프로세싱을 포함할 수 있다. 프로세싱은 상술한 바와 같이, 보컬 트랙 데이터, 연주 트랙 데이터 및 마이크로폰으로부터의 입력의 프로세싱을 포함할 수 있다. 프로세싱은 또한 도 2-6에서 상기에 예시된 사용자 인터페이스 스크린들을 통해 수신되는 제어 입력과 같은 사용자 입력의 프로세싱을 포함할 수 있다.
[0072] 도 12는 본원에 설명된 확장 피처들을 위해 적합하게 구성된 확장 미디어 파일 애플리케이션을 갖는 호스트 디바이스(1200)의 블록도이다. 예를 들어, 확장 미디어 파일 애플리케이션은 확장 미디어 파일의 프로세싱 동안 확장 피처들의 지원을 위한 디바이스(1200) 상에 설치될 수 있다. "atomicparsely" 툴과 같은, 도 7에 예시된 생성 프로세스로 이용하기 위한 파일 생성 및 편집기 애플리케이션은 확장 미디어 파일의 생성을 위해 디바이스(1200) 상에 설치될 수 있다. 따라서, 호스트 디바이스(1200)는 랩톱 또는 태블릿 컴퓨터 디바이스와 같은 이동 플랫폼 컴퓨터 디바이스를 포함할 수 있거나 데스크톱 컴퓨터 디바이스, 또는 유사한 능력들을 갖는 다양한 컴퓨터 디바이스들 중 하나를 포함할 수 있다.
[0073] 호스트 디바이스(1200)는 디바이스가 네트워크 및/또는 다른 사용자들과 통신하는 네트워크 통신 인터페이스(1202)를 포함한다. 예를 들어, 인터페이스(1202)는 "와이파이" 네트워크들, 셀룰러 전화 네트워크들, "블루투스" 프로토콜 등을 통한 통신을 위한 컴포넌트를 포함할 수 있다. 프로세서(1204)는 호스트 디바이스의 동작들을 제어한다. 프로세서는 컴퓨터 프로세싱 회로를 포함하며 전형적으로 하나 또는 둘 이상의 집적된 회로 칩들 및 관련된 컴포넌트들로서 구현된다. 디바이스는 디바이스 운영 시스템, 확장 미디어 파일 애플리케이션, 사용자 데이터 및 기계-실행가능한 프로그램 명령들이 프로세서에 의한 실행을 위해 저장될 수 있는 메모리(1206)를 포함한다. 메모리는 펌웨어, 랜덤 액세스 메모리(RAM) 및 저장 매체를 포함할 수 있다. 사용자 입력 컴포넌트(1208)는 사용자가 제어들 및 데이터를 제공할 수 있는 메커니즘이다. 사용자 입력 컴포넌트는 확장 미디어 파일 애플리케이션을 동작시키기 위해 사용자 제어 및 데이터 입력을 제공하기 위해 예를 들어, 터치스크린, 키보드 또는 숫자 패드, 음성 입력 인터페이스 또는 다른 입력 메커니즘을 포함할 수 있다. 디스플레이(1210)는 시각적(그래픽) 출력 디스플레이를 제공하며 오디오 컴포넌트(1212)는 호스트 디바이스에 대한 가청 출력을 제공한다. 널리 다양한 디바이스들이 본원에 설명된 확장 미디어 파일 애플리케이션의 실행을 위해 적합한 것이 이해되어야 한다. 더욱이, 당업자는 본원에 설명된 확장 피처들을 제공하기 위해 프로세서에 의해 실행되는 데이터를 갖는 확장 미디어 파일들로 통합되는 콘텐츠를 생성하기 위해 유사하게 널리 다양한 디바이스들이 적합함을 이해할 것이다.
[0074] 도 13은 본원에 논의된 바와 같은 확장 미디어 파일의 프로세싱과 관련하여 확장 피처들을 제공하기 위한 디바이스 동작들의 흐름도이다. 동작들은 도 10에 예시된 디바이스(1000)와 같은 호스트 디바이스에 의해 수행될 수 있다. 1302로 라벨링된 흐름도 박스에 의해 표시된 제 1 디바이스 동작에서, 호스트 디바이스의 확장 미디어 파일 애플리케이션은 호스트 디바이스 또는 호스트에 접속된 외부 디바이스에 저장될 수 있는 확장 미디어 파일에 액세스하거나, 스트리밍될 수 있거나 그렇지 않으면 네트워크 접속을 통해 다른 디바이스로부터 획득될 수 있다. 박스(1304)에서, 확장 미디어 파일 애플리케이션은 확장 미디어 파일로부터 판독되는 피처 데이터에 액세스한다. 이러한 동작은 m4a 파일의 맵 데이터와 관련된 udta 섹션에서 데이터를 탐색하는 것과 같은, 확장 미디어 파일과 관련된 메타데이터를 인식하고 확장 미디어 파일을 파싱하는 애플리케이션에 의해 달성된다. 다음의 박스(1306)로 표시된 다음의 동작에서, 확장 미디어 파일 애플리케이션은 파일에 이용 가능한 피처 데이터를 결정하며 피처 데이터로부터 가능한 확장 피처들을 결정한다. 박스(1308)에서, 확장 미디어 파일 애플리케이션은 확장 미디어 파일의 피처 데이터에 따라 사용자 인터페이스를 발생시킨다. 이러한 동작은 피처 데이터에 따라 제어들 및 사용자 인터페이스 피처들을 노출시킨다. 피처들은 예를 들어, 도 2-6에 예시된 스크린 디스플레이들을 포함할 수 있다. 확장 미디어 파일 애플리케이션은 이제 확장 피처들로 사용자 인터페이스를 개시하고 조작하기 위한 사용자 상호 작용을 수신할 준비가 된다.
[0075] 다음 박스(1310)에서, 디바이스는 사용자 인터페이스를 통해 확장 피처들에 대한 사용자 입력을 수신한다. 사용자 입력은 예를 들어, 사용자에 의해 개시되는 바와 같은, 사용자 음성 입력, 터치스크린 입력, 키보드 데이터 등을 포함할 수 있다. 사용자 입력은 확장 미디어 파일 애플리케이션에 의해 프로세싱된다. 박스(1312)에서, 확장 미디어 파일 애플리케이션은 확장 피처들에 따라, 수신된 사용자 입력에 응답하여 사용자 인터페이스를 발생시킨다. 상기에 주목된 바와 같이, 세팅들 및 사용자 입력과 같은, 사용자에 의해 제공된 임의의 상호 작용을 저장할 수 있으며, 사용자 입력에 응답하여 오디오 및 시각적 프레젠테이션을 수정할 수 있다. 사용자 입력을 저장하고 사용자 입력에 응답하기 위한 이러한 프로세싱의 전부는 박스(1312)에 의해 표현된 동작 내에 망라된다. 이러한 방식으로, 사용자는 호스트 디바이스의 적합하게 구성되는 확장 미디어 파일 애플리케이션에 의해 프로세싱된 바와 같이, 본원에 설명된 피처 데이터를 갖는 확장 미디어 파일로부터 사용자 인터페이스를 통해 이용 가능한 확장 피처들을 향유할 수 있다. 상기에 주목된 바와 같이, 확장 미디어 파일을 프로세싱하는 종래의 재생 애플리케이션은 피처 데이터에 액세스할 수 없을 것이며 따라서 확장 피처들을 제공할 수 없을 것이며, 대신에 종래의 재생 경험을 제공할 것이다. 확장 미디어 파일 애플리케이션은 사용자가 입력을 제공하거나 애플리케이션이 종료시에 프로세싱을 멈추는 한, 박스(1314)에서 사용자 입력을 계속해서 프로세싱한다.
[0076] 확장 미디어 파일은 컴퓨터 디바이스에 의해 실행될 수 있는 컴퓨터 구현 가능한 명령들을 포함하는 비-일시적 컴퓨터 판독 가능 저장 매체에 구체화된 컴퓨터 프로그램 물건으로서 제공될 수 있다. 저장 매체는 예를 들어, 플래시 메모리, 데이터 CD 또는 DVD와 같은 광학 디스크, 또는 다른 데이터 저장 디바이스를 포함할 수 있다. 확장 미디어 파일을 실행하기 위한 컴퓨터 디바이스는 예를 들어, 이동 디바이스 또는 테이블 컴퓨터 또는 데스크톱 또는 랩톱 컴퓨터와 같은 프로세서의 제어 하에 동작하는 널리 다양한 컴퓨터 디바이스들을 포함할 수 있다. 저장 매체 상에 저장되는 컴퓨터 구현 가능한 명령들은 재생 애플리케이션으로의 재생을 위해 구성되는 미디어 데이터 파일 및 미디어 파일 데이터와 관련된 피처 데이터를 포함한다. 피처 데이터는 확장 재생 애플리케이션으로의 재생을 위해 구성되며, 저장된 미디어 파일 데이터 및 관련되는 저장된 피처 데이터는 재생 애플리케이션이 재생을 위해 미디어 파일 데이터를 프로세싱할 수 있지만 피처 데이터를 프로세싱할 수 없도록 확장 미디어 파일을 포함한다. 확장 재생 애플리케이션은 미디어 파일 데이터를 프로세싱할 수 있으며 피처 데이터를 프로세싱할 수 있다.
[0077] 다수의 추가적인 프로세싱 능력들이 본원의 설명에 따라 가능함이 인식될 것이다. 또한, 상기에 논의된 방법들, 시스템들 및 디바이스들이 단지 예들로서 의도됨이 주목되어야 한다. 다양한 실시예들은 적절히 다양한 절차들 또는 컴포넌트들을 생략, 치환 또는 추가할 수 있다. 예를 들어, 대안적인 실시예들에서, 방법들은 설명된 것과 다른 순서로 수행될 수 있으며, 다양한 단계들이 추가, 생략 또는 조합될 수 있음이 인식되어야 한다. 또한, 특정 실시에들에 관하여 설명된 피처들은 다양한 다른 실시예들에서 조합될 수 있다. 실시예들의 서로 다른 양상들 및 엘리먼트들이 유사한 방식으로 조합될 수 있다. 또한, 기술이 진화하며, 따라서 엘리먼트들 중 다수가 예시들이며 본 발명의 범위를 제한하는 것으로 해석되어서는 안 됨이 강조되어야 한다.
[0078] 실시예들의 완전한 이해를 제공하기 위해 특정 상세들이 설명에 제공된다. 그러나 실시예들이 이들 특정 상세들 없이 실시될 수 있음이 당업자에 의해 이해될 것이다. 예를 들어, 잘-알려진 회로들, 프로세스들, 알고리즘들, 구조들 및 기술들은 실시예들을 모호하게 하는 것을 회피하기 위해 불필요한 상세 없이 도시되었다. 또한, 본원에 제공된 주제들(headings)은 단지 다양한 실시예들의 설명들의 명확성을 보조하기 위한 것이며, 본 발명의 범위 또는 본 발명의 임의의 부분의 기능을 제한하는 것으로서 해석되어서는 안 된다. 예를 들어, 특정 방법들 또는 컴포넌트들은 이들이 비록 서로 다른 주제들 하에 설명되더라도, 다른 방법들 또는 컴포넌트들의 일부로서 구현될 수 있다.
[0079] 또한, 실시예들은 흐름도 또는 블록도로서 도시되는 프로세스로서 설명될 수 있다. 각각이 순차적 프로세스로서 동작들을 설명할 수 있더라도, 동작들 중 다수는 병렬로 또는 동시적으로 수행될 수 있다. 추가로, 동작들의 순서는 재배열될 수 있다. 프로세스는 도면들에 포함되지 않은 추가적인 단계들을 가질 수 있다.

Claims (29)

  1. 컴퓨터 디바이스에서 확장(enhanced) 미디어 파일을 프로세싱하는 방법으로서,
    상기 컴퓨터 디바이스에서 상기 확장 미디어 파일의 확장 피처 데이터에 액세스하는 단계;
    액세스된 확장 피처 데이터에 따라 사용자 인터페이스를 발생시키는 단계;
    상기 확장 피처 데이터에 적용하기 위해 상기 사용자 인터페이스로부터의 사용자 데이터 입력을 수신하는 단계; 및
    수신된 사용자 데이터 입력을 상기 확장 미디어 파일의 상기 확장 피처 데이터와 함께 저장하는 단계를 포함하며,
    상기 확장 피처 데이터는 상기 컴퓨터 디바이스에 설치되는 확장 미디어 파일 애플리케이션에 의해 프로세싱될 수 있지만 상기 컴퓨터 디바이스에 설치되는 종래의 재생(playback) 애플리케이션에 의해서는 무시되는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  2. 제 1 항에 있어서,
    저장된 사용자 데이터 입력을 리트리브하는 단계; 및
    리트리브된 사용자 데이터 입력을 상기 컴퓨터 디바이스에 의한 출력을 위해 상기 확장 미디어 파일 애플리케이션에 의해 프로세싱세싱하는 단계를 더 포함하는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  3. 제 1 항에 있어서,
    상기 수신된 사용자 데이터 입력을 저장하는 단계는 상기 수신된 사용자 데이터 입력을 상기 확장 미디어 파일의 메타데이터로 레코딩하는 단계를 포함하는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  4. 제 1 항에 있어서,
    상기 수신된 사용자 데이터 입력은 상기 확장 미디어 파일 애플리케이션의 출력을 변경하는 실시간 미디어 이펙트를 특정하는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  5. 제 4 항에 있어서,
    상기 실시간 미디어 이펙트는 상기 확장 미디어 파일의 프로세싱 동안의 오디오 변화와 관련되는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  6. 제 5 항에 있어서,
    상기 오디오 변화는 상기 확장 미디어 파일의 오디오 스템(stem)과 관련되는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  7. 제 5 항에 있어서,
    상기 오디오 변화는 저장된 사용자 데이터 입력과 관련되는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  8. 제 5 항에 있어서,
    상기 오디오 변화는 상기 확장 미디어 파일의 프로세싱 동안 수신되는 사용자 데이터 입력과 관련되며 상기 확장 미디어 파일 애플리케이션의 출력을 변경하는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  9. 제 8 항에 있어서,
    상기 수신된 사용자 데이터 입력은 상기 실시간 미디어 이펙트들에 대한 세팅들을 포함하는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  10. 제 8 항에 있어서,
    상기 수신된 사용자 데이터 입력은 오디오 캡처 디바이스로부터의 데이터를 포함하는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  11. 제 4 항에 있어서,
    상기 실시간 미디어 이펙트는 상기 확장 미디어 파일의 프로세싱 동안의 비디오 변화와 관련되는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  12. 제 1 항에 있어서,
    상기 수신된 사용자 데이터 입력을 저장하는 단계는 이전의 사용자 데이터 입력을 덮어쓰기(overwriting)하는 단계를 포함하는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  13. 제 1 항에 있어서,
    상기 수신된 사용자 데이터 입력을 저장하는 단계는 상기 수신된 사용자 데이터 입력을 상기 확장 피처 데이터에 첨부하는 단계를 포함하는,
    컴퓨터 디바이스에서 확장 미디어 파일을 프로세싱하는 방법.
  14. 확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스로서,
    프로그램 명령들을 실행하도록 구성되는 프로세서; 및
    상기 컴퓨터 디바이스에 저장된 프로그램 명령들을 포함하며,
    상기 프로그램 명령들은,
    상기 프로세서에 의해 실행될 때, 상기 컴퓨터 디바이스에서 상기 확장 미디어 파일의 확장 피처 데이터에 액세스하고, 액세스된 확장 피처 데이터에 따라 사용자 인터페이스를 발생시키며, 상기 확장 피처 데이터에 적용하기 위한 사용자 데이터 입력을 수신하며, 그리고 수신된 사용자 데이터 입력을 상기 확장 미디어 파일의 상기 확장 피처 데이터와 함께 저장하는 동작들을 제공하고,
    상기 확장 피처 데이터는 상기 컴퓨터 디바이스에 설치되는 확장 미디어 파일 애플리케이션에 의해 프로세싱될 수 있지만 상기 컴퓨터 디바이스에 설치되는 종래의 재생 애플리케이션에 의해서는 무시되는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  15. 제 14 항에 있어서,
    상기 프로세서는 저장된 사용자 데이터 입력을 리트리브하고 리트리브된 사용자 데이터 입력을 상기 컴퓨터 디바이스에 의한 출력을 위해 프로세싱하는 동작들을 더 제공하는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  16. 제 14 항에 있어서,
    상기 수신된 사용자 데이터 입력은 상기 확장 미디어 파일의 메타데이터로 레코딩되는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  17. 제 14 항에 있어서,
    상기 수신된 사용자 데이터 입력은 상기 확장 미디어 파일 애플리케이션의 출력을 변경하는 실시간 미디어 이펙트를 특정하는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  18. 제 17 항에 있어서,
    상기 실시간 미디어 이펙트는 상기 확장 미디어 파일의 프로세싱 동안의 오디오 변화와 관련되는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  19. 제 18 항에 있어서,
    상기 오디오 변화는 상기 확장 미디어 파일의 오디오 스템과 관련되는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  20. 제 18 항에 있어서,
    상기 오디오 변화는 저장된 사용자 데이터 입력과 관련되는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  21. 제 18 항에 있어서,
    상기 오디오 변화는 상기 확장 미디어 파일의 프로세싱 동안 수신되는 사용자 데이터 입력과 관련되며 상기 확장 미디어 파일 애플리케이션의 출력을 변경하는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  22. 제 21 항에 있어서,
    상기 수신된 사용자 데이터 입력은 상기 실시간 미디어 이펙트들에 대한 세팅들을 포함하는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  23. 제 21 항에 있어서,
    상기 수신된 사용자 데이터 입력은 오디오 캡처 디바이스로부터의 데이터를 포함하는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  24. 제 17 항에 있어서,
    상기 실시간 미디어 이펙트는 상기 확장 미디어 파일의 프로세싱 동안의 비디오 변화와 관련되는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  25. 제 14 항에 있어서,
    상기 수신된 사용자 데이터 입력을 저장하는 것은 이전의 사용자 데이터 입력을 덮어쓰기하는 것을 포함하는,
    확장 미디어 파일을 프로세싱하기 위한 컴퓨터 디바이스.
  26. 제 14 항에 있어서,
    상기 수신된 사용자 데이터 입력을 저장하는 것은 상기 수신된 사용자 데이터 입력을 상기 확장 피처 데이터에 첨부하는 것을 포함하는,
    확장 미디어 파일을 프로세싱하기 위한 방법.
  27. 컴퓨터 디바이스에서 확장 미디어 파일을 생성하는 방법으로서,
    상기 컴퓨터 디바이스에 미디어 데이터 파일을 저장하는 단계 ― 저장된 미디어 데이터 파일은 종래의 미디어 재생 애플리케이션으로의 재생을 위해 구성된 데이터를 포함함 ―;
    상기 컴퓨터 디바이스에 상기 미디어 파일 데이터와 연관된 확장 피처 데이터를 저장하는 단계를 포함하며,
    상기 확장 피처 데이터는 확장 미디어 파일 애플리케이션으로의 재생을 위해 구성되고,
    상기 저장된 미디어 파일 데이터 및 저장된 연관된 확장 피처 데이터는, 상기 확장 미디어 파일 애플리케이션이 상기 확장 미디어 파일을 프로세싱할 수 있고 상기 확장 미디어 파일의 확장 피처 데이터에 액세스할 수 있으며, 액세스된 확장 피처 데이터에 따라 사용자 인터페이스를 발생시킬 수 있고, 상기 확장 피처 데이터에 적용하기 위한 사용자 데이터 입력을 수신할 수 있으며, 그리고 수신된 사용자 데이터 입력을 상기 확장 미디어 파일의 상기 확장 피처 데이터와 함께 저장할 수 있도록, 상기 확장 미디어 파일을 저장하며,
    상기 확장 피처 데이터는 상기 확장 미디어 파일 애플리케이션에 의해 프로세싱될 수 있지만 종래의 재생 애플리케이션에 의해서는 무시되는,
    컴퓨터 디바이스에서 확장 미디어 파일을 생성하는 방법.
  28. 컴퓨터 호스트 디바이스를 구성하는 방법으로서,
    상기 컴퓨터 호스트 디바이스에 대해 서버 컴퓨터 디바이스에서 네트워크 통신 링크를 구축하는 단계; 및
    상기 네트워크 통신 링크를 통해 상기 서버 컴퓨터 디바이스로부터 상기 컴퓨터 호스트 디바이스에 프로그램 명령들을 전송하는 단계를 포함하고,
    전송되는 프로그램 명령들은 상기 컴퓨터 호스트 디바이스의 메모리에 저장되도록 구성되며, 상기 컴퓨터 호스트 디바이스에서 확장 미디어 파일의 확장 피처 데이터에 액세스하고, 액세스된 확장 피처 데이터에 따라 사용자 인터페이스를 발생시키고, 상기 확장 피처 데이터에 적용하기 위한 사용자 데이터 입력을 수신하고, 그리고 수신된 사용자 데이터 입력을 상기 확장 미디어 파일의 상기 확장 피처 데이터와 함께 저장하도록 실행되고,
    상기 확장 피처 데이터는 상기 컴퓨터 호스트 디바이스에 설치되는 확장 미디어 파일 애플리케이션에 의해 프로세싱될 수 있지만 상기 컴퓨터 호스트 디바이스에 설치되는 종래의 재생 애플리케이션에 의해서는 무시되는,
    컴퓨터 호스트 디바이스를 구성하는 방법.
  29. 컴퓨터 디바이스에 의해 실행되는 컴퓨터 구현 가능한 명령들을 포함하는 비-일시적 컴퓨터 판독 가능 저장 매체로 구체화되는 컴퓨터 프로그램 물건으로서,
    상기 컴퓨터 구현 가능한 명령들은 미디어 파일 데이터와 연관된 확장 피처 데이터 및 재생 애플리케이션으로의 재생을 위해 구성되는 미디어 데이터 파일을 포함하며,
    상기 확장 피처 데이터는 확장 재생 애플리케이션으로의 재생을 위해 구성되고,
    저장된 미디어 파일 데이터 및 저장된 연관된 피처 데이터는, 상기 재생 애플리케이션이 재생을 위해 상기 미디어 파일 데이터를 프로세싱할 수 있지만 상기 확장 피처 데이터는 프로세싱할 수 없도록, 그리고 상기 확장 재생 애플리케이션이 상기 미디어 파일 데이터를 프로세싱할 수 있고 상기 확장 피처 데이터를 프로세싱할 수 있도록, 상기 확장 미디어 파일을 포함하는,
    컴퓨터 프로그램 물건.
KR1020147000296A 2011-06-05 2012-06-05 확장 미디어 레코딩 및 재생 KR20140039266A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161493476P 2011-06-05 2011-06-05
US61/493,476 2011-06-05
PCT/US2012/040935 WO2012170432A2 (en) 2011-06-05 2012-06-05 Enhanced media recordings and playback

Publications (1)

Publication Number Publication Date
KR20140039266A true KR20140039266A (ko) 2014-04-01

Family

ID=47262665

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020147000296A KR20140039266A (ko) 2011-06-05 2012-06-05 확장 미디어 레코딩 및 재생

Country Status (8)

Country Link
US (1) US20120311445A1 (ko)
EP (1) EP2718932A4 (ko)
JP (1) JP2014520352A (ko)
KR (1) KR20140039266A (ko)
CN (1) CN103718243A (ko)
AU (1) AU2012268390A1 (ko)
CA (1) CA2838114A1 (ko)
WO (1) WO2012170432A2 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9141186B2 (en) * 2012-03-22 2015-09-22 Htc Corporation Systems and methods for providing access to media content
JP7080007B2 (ja) * 2014-06-30 2022-06-03 ソニーグループ株式会社 情報処理装置および情報処理方法
CN106468987B (zh) * 2015-08-18 2020-05-12 腾讯科技(深圳)有限公司 一种信息处理方法及客户端
US10841462B2 (en) * 2015-10-01 2020-11-17 William BOLLMAN Wireless networked record session device
US10622021B2 (en) * 2016-02-19 2020-04-14 Avcr Bilgi Teknolojileri A.S Method and system for video editing
US11625216B2 (en) * 2018-09-17 2023-04-11 Apple Inc. Techniques for analyzing multi-track audio files
JP2024512493A (ja) * 2021-03-26 2024-03-19 ソニーグループ株式会社 電子機器、方法及びコンピュータプログラム
CN113889154B (zh) * 2021-09-30 2024-03-19 广州维梦科技有限公司 声音录制方法、终端、存储介质

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1219283C (zh) * 2001-08-07 2005-09-14 北京大恒鼎芯科技有限公司 可视音带的图文数据生成和编码方法及图文数据播放装置
US7159174B2 (en) * 2002-01-16 2007-01-02 Microsoft Corporation Data preparation for media browsing
US7535465B2 (en) * 2003-09-02 2009-05-19 Creative Technology Ltd. Method and system to display media content data
JP3858883B2 (ja) * 2003-10-28 2006-12-20 ソニー株式会社 記録装置及びその制御方法
JP2005332521A (ja) * 2004-05-21 2005-12-02 Toshiba Corp 情報記録媒体及び情報再生装置
JP2006108843A (ja) * 2004-10-01 2006-04-20 Matsushita Electric Ind Co Ltd 再生装置と再生方法
JP2006221754A (ja) * 2005-02-10 2006-08-24 Toshiba Corp 情報記憶媒体、情報記録方法、および情報再生方法
US20080025507A1 (en) * 2005-09-02 2008-01-31 Taylor Stephen F Secure file conversion and multimedia sampler processing
WO2007138546A2 (en) * 2006-06-01 2007-12-06 Thomas Leonard Single file rich media package portable across multiple devices
JP2007018730A (ja) * 2006-10-10 2007-01-25 Fujitsu Ltd 多重記録媒体及び記憶装置
US20080141310A1 (en) * 2006-12-07 2008-06-12 Comcast Cable Holdings, Llc System and method for managing content on a digital video recorder
JP4905190B2 (ja) * 2007-03-13 2012-03-28 株式会社Jvcケンウッド 音声再生装置、音声再生方法、及びプログラム
US20090047993A1 (en) * 2007-08-14 2009-02-19 Vasa Yojak H Method of using music metadata to save music listening preferences
US8887048B2 (en) * 2007-08-23 2014-11-11 Sony Computer Entertainment Inc. Media data presented with time-based metadata
US8385588B2 (en) * 2007-12-11 2013-02-26 Eastman Kodak Company Recording audio metadata for stored images
US8386947B2 (en) * 2008-01-18 2013-02-26 Microsoft Corporation Declaratively composable dynamic interface framework
US20090292731A1 (en) * 2008-05-23 2009-11-26 Belkin International, Inc. Method And Apparatus For Generating A Composite Media File
CN102037494A (zh) * 2008-06-06 2011-04-27 迪维克斯公司 用于多媒体文件的字体文件优化系统和方法
US8438482B2 (en) * 2009-08-11 2013-05-07 The Adaptive Music Factory LLC Interactive multimedia content playback system

Also Published As

Publication number Publication date
JP2014520352A (ja) 2014-08-21
CA2838114A1 (en) 2012-12-13
WO2012170432A3 (en) 2013-02-28
EP2718932A4 (en) 2014-11-26
WO2012170432A2 (en) 2012-12-13
AU2012268390A1 (en) 2014-01-16
CN103718243A (zh) 2014-04-09
US20120311445A1 (en) 2012-12-06
EP2718932A2 (en) 2014-04-16

Similar Documents

Publication Publication Date Title
KR20140039266A (ko) 확장 미디어 레코딩 및 재생
US10095466B2 (en) Method and system for making and playing soundtracks
US5852800A (en) Method and apparatus for user controlled modulation and mixing of digitally stored compressed data
US20080215172A1 (en) Non-Linear Presentation of Content
KR20060116383A (ko) 디지털 오디오 재생장치의 이퀄라이저 기능 자동 설정 방법및 장치
US20160012853A1 (en) Clip creation and collaboration
KR20040104800A (ko) 메타 데이터 관리 장치 및 방법
Jang et al. The MPEG interactive music application format standard [standards in a nutshell]
JP2000207417A (ja) 情報提供装置及び情報提供方法
US20110125297A1 (en) Method for setting up a list of audio files
KR101464797B1 (ko) 객체 기반 오디오 서비스를 위한 오디오 저작 장치 및 오디오 재생 장치, 이를 이용하는 오디오 저작 방법 및 오디오 재생 방법
Corral García et al. Enabling interactive and interoperable semantic music applications
US20090192636A1 (en) Media Modeling
US20010042145A1 (en) Method for combining multimedia data with audio data from a compact disk
JPH08306124A (ja) 記憶媒体の自動識別装置、音楽用cdの自動識別方法、音楽用cdの自動識別装置、記憶媒体の再生方法、及び記憶媒体の再生装置
EP2083422A1 (en) Media modelling
JP2011076485A (ja) コンテンツ情報表示制御装置およびそのプログラム
Stewart et al. Interactive music applications and standards
TW201417581A (zh) 線上影音伴唱系統及其伴唱影音檔案搜尋方法
JP2007058977A (ja) 音声再生装置、その制御方法及び制御プログラム
Durdik Help Composing Your Song with Notes on GarageBand Menus
KR20050115016A (ko) 디지털 오디오 파일의 구조와, 그 기록 및 재생 방법
JP2002304180A (ja) カラオケ装置のデータベース更新方法
KR20070016620A (ko) 오디오 데이터의 메타 데이터를 음성으로 제공하는 장치 및그 방법
KR20040104801A (ko) 플레이리스트 관리 시스템 및 방법

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid